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内 容 简介 


遗传 算法 (genetic algorithm) 是 模拟 自然 界 生 物 进化 过 程 与 机 制 求解 问 
题 的 一 类 自 组 织 与 自 适 应 的 人 工 智能 技术 ,已 广泛 应 用 于 计算 机 科学 、 人 工 
智能 、 信 息 技术 及 工程 实践 。 

本 书 重点 在 于 前述 遗传 算法 的 数学 基础 。 全 书 共 分 3 章 , 第 上 章 给 出 了 
遗传 算法 的 几何 理论 ,第 2 章 给 出 了 遗传 算法 的 马尔 可 夫 链 分 析 , 第 3 章 给 
出 了 遗传 算法 的 收 敏 理论 。 

本 书 可 以 作为 研究 遗传 算法 的 参考 书 ,也 可 以 作为 应 用 数学 ,计算 机 科 
学 .系统 科学 等 专业 研究 生 的 教材 。 


lit 


遗传 算法 (genetic algorithm) 是 模拟 自然 界 生 物 进化 过 程 与 
机 制 求解 极 值 问题 的 一 类 自 组 织 、 自 适应 人 工 智 能 技术 。 它 模拟 
达尔 文 的 自然 进化 论 与 孟 代 尔 的 遗传 变异 理论 ,具有 坚实 的 生物 
学 基础 ; 它 提供 从 智能 生成 过 程 观 点 对 生物 智能 的 模拟 ,具有 鲜明 
的 认 知 学 意义 ; 它 适 合 于 无 表达 或 有 表达 的 任何 类 函数 ,具有 可 实 
现 的 并 行 计算 行为 ; 它 能 解决 任何 类 实际 问题 ,具有 广泛 的 应 用 价 
值 。 因 此 ,最 近 十 多 年 ,遗传 算法 在 国内 外 售 受 重视 。 

遗传 算法 的 思想 由 来 已 入 。 早 在 20 世纪 50 年 代 , 一 些 生 物 
学 家 就 着 手 于 计算 机 模拟 生物 的 遗传 系统 。1967 年 ,美国 芝加哥 
大 学 Holland, J.H. 教 授 在 研究 适应 系统 时 ,进一步 涉及 进化 演算 
的 思考 ,并 于 1968 年 提出 模式 理论 。1975 年 Holland 教授 的 专 
著 自 然 界 和 人 工 系 统 的 适应 性 了 (Adaptation in Nature and Artifi- 
cial Systems) 5) tt, = HHS TR ARK, HRB RR T E 
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础 。 此 后 ,遗传 算法 无 论 在 理论 研究 方面 ,还 是 在 实际 应 用 方面 都 
有 了 长 足 的 发 展 。 

一 种 理论 的 成 熟 取 决 于 它 的 数学 描述 的 完善 程度 。 随 着 遗传 
算法 的 广泛 应 用 ,理论 研究 也 越 来 越 深 人 。 对 于 遗传 算法 的 理论 
分 析 基 本 上 有 两 大 类 :一 类 是 遗传 算法 的 马 氏 链 模型 ;一 类 是 
Vose-Liepins 模型 。 表 面 上 这 两 类 方法 似乎 是 有 限 状 态 与 无 限 状 
态 之 分 ,但 研究 的 方法 大 相 径 庭 。 对 于 马 氏 链 模 型 主要 采用 转移 
概率 与 极限 理论 ;对 于 Yose-Liepins 模型 主要 采用 不 动 点 理论 , 具 
有 浓厚 的 几何 色彩 。 本 书 的 第 1 章 除 介绍 遗传 算法 的 基本 概念 以 
外 ,介绍 了 Vose-Liepins 模型 ,第 2 EmA TTBER ANES ES 
型 。 不管 是 遗传 算法 的 马 氏 链 模 型 ,还 是 Vose-Liepins 模型 ,重点 
都 是 研究 遗传 算法 的 收 语 性 。 我 们 在 第 3 章 中 ,在 马 氏 链 模 型 与 
Vose-Liepins $W 89 4 tt E, HUE T iE RM oka HAAR 
UA Be ik 36 Bb a SR E 22 [B| PR FR, h TER AE 
理 ,建立 了 证 明 遗 传 算法 收 合 的 一 般 方法 。 通 过 对 于 各 种 基体 遗 
传 算法 收 煞 性 的 证 明 ,证 明了 这 种 方法 的 有 效 性 。 第 3 章 的 结果 
主要 是 西安 交通 大 学 理学 院 信 息 与 系统 研究 所 的 专家 们 与 香港 中 
误 大 学 的 有 关 专 家 合作 科研 的 成 果 。 这 些 专家 包括 徐 宗 本 教授 、 
SE pK ye RBA BAMA , 张 讲 社 副 教授 、 段 启 宏 博士 
等 ,当然 也 包括 本 书 的 两 位 作者 。 读 者 将 可 以 看 出 ,第 3 章 中 所 提 
供 的 方法 更 加 清晰 .简明 。 因 此 本 书 除 了 是 对 国际 上 遗传 算法 理 
论 分 析 的 总 结 之 外 ,同时 也 是 西安 交通 大 学 与 香港 中 文大 学 两 校 
有 关 和 研究 成 果 的 总 结 。 感 谢 这 些 专家 们 将 尚未 发 表 的 结果 提供 出 
来 ,使 本 书 的 写作 更 加 丰富。 特别 要 指出 的 是 ,本 书 的 绪论 主要 引 
自我 们 指导 的 博士 生 商 勇 的 博士 论文 。 

尽管 遗传 算法 已 有 不 少 的 理论 研究 ,但 仍然 不 能 说 是 很 完善 ， 
或 很 这 和 人。 理论 的 研究 与 遗传 算法 真实 广阔 的 发 展 前 景 之 间 还 有 
着 很 大 的 距离 。 跟 传 算法 对 生物 演 北 的 模拟 基本 上 还 是 形式 的 ， 
还 未 诬 入 到 生物 演化 内 部 规律 的 模拟 ,因此 这 使 遗传 算法 的 作用 
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大 受 局 限 。 应 用 与 理论 的 相互 推动 ,将 会 使 遗传 算法 放射 出 巨大 
光芒 。 当 生命 演化 模拟 的 遗传 算法 用 来 研究 生物 演化 ,特别 是 研 
究 太 脑 的 演化 过 程 时 , 那 将 是 遗传 算法 辉 煌 的 时 期 。 致 力 于 遗传 
算法 的 研究 必须 站 在 科学 技术 时 代 的 前 沿 , 正 因为 如 此 , 当 完 成 本 
书稿 时 ,作者 深 感 本 书 之 不 完善 一 一 对 过 去 的 研究 历史 挂 一 漏 万 ， 
对 未 来 的 发 展 又 未 能 有 后 展望 。 不 过 作为 进 人 猎 究 遗传 算法 的 捷 
径 , 本 书 对 那些 初 涉 遗传 算法 者 将 会 有 些 方便 之 处 ,可 以 使 读者 加 
免 重新 闻 读 大 最 文献 ,同时 给 出 了 较 大 的 思维 活动 空间 。 本 书 如 
能 有 这 种 作用 ,已 倍 感 某 幸 。 
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0-1 遗传 算法 是 一 种 仿生 优化 算法 


我 们 的 自然 界 充 满 了 奇迹 ,而 生命 的 繁 入 生息 则 是 这 些 奇 迹 
中 区 奇迹 。 生 命 是 脆弱 的 ,生命 也 是 顽强 的 。 从 远古 时 代 单 细胞 
开始 ,历经 环境 变迁 的 磨难 ,生命 经 过 了 从 低级 到 高 级 .从 简单 到 
复杂 的 演化 之 路 ,不 但 延续 下 来 .而且 产生 了 人 类 这 样 有 思维 、 有 
智力 的 高 级 生命 体 。 人 类 找到 了 生命 的 最 佳 结构 与 形式 , 它 不 仅 
仅 可 以 被 动 地 适应 环境 ,更 重要 的 是 它 能 够 通过 学 习 ,模拟 与 创 
造 ,不 断 提高 自己 适应 环境 的 能 力 。 

在 人 类 的 历史 上 ,通过 学 习 与 模拟 来 增强 自身 适应 能 力 的 例 
FREER, PLEA, ABO LL RK Ea, A aT 
横渡 海洋 ;模拟 昆虫 ,人 类 可 以 维 观 千里 ;模拟 大 脑 , 人 类 人 一 造 了 影 
唤 志 界 发 展 的 计算 机 。 人 类 的 模拟 能 力 并 不 仅仅 局 限于 自然 现象 
和 其 他 生命 体 。 自 从 20 世纪 后 半 叶 以 来 ,人 类 正在 将 其 模拟 的 范 
围 延 仲 向 人 类 自身 。 神 经 网 络 (neural network) 是 人 类 对 其 大 脑 
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信息 处 理 机 制 的 模拟 ,模糊 系统 (fuzzy systems) 是 人 类 对 其 思维 
方式 的 模拟 。 除 了 向 自身 结构 的 学 习 以 外 ,人 类 还 可 以 向 其 自身 
的 演化 这 一 更 为 宏观 的 过 程 学 习 , 来 增强 自己 解决 问题 的 能 力 , 其 
代表 性 的 方法 就 是 遗传 算法 (genetic algorithm, GA). 

大 类 之 所 以 能 够 向 其 自身 的 演化 学 习 以 增强 决策 问题 的 能 
力 , 是 因为 自然 演化 过 程 本 质 就 是 -一 个 学 习 与 优化 的 过 程 。 这 -一 
优化 过 程 的 肯 的 是 使 生命 体 达 到 适应 环境 的 最 佳 结构 与 效果 。 曾 
经 主宰 地 球 的 杰 龙 由 于 庞大 的 身躯 跟 不 上 环境 的 变迁 而 灭绝 ;长 
颈 谭 为 了 更 食 而 长 长 了 脖子 ;老鼠 的 机 敏 是 为 了 生存 而 挣扎 的 结 
果 ; 青 蛙 的 存活 则 得 益 于 其 两 栖 式 左右 连 源 的 能 力 ; 人 类 解放 出 有 
力 的 双手 ,得 益 于 类 人 长 求 生 的 努力 ,而 正 是 这 一 对 不 再 用 于 行走 
的 双手 ,使 人 类 成 了 这 个 世界 的 主宰 。 自 然 演化 遵循 着 一 种 奇妙 
的 规律 ,这 一 规律 截然 不 同 于 人 类 自己 发 明 的 解析 方法 。 我 们 知 
iË, Atk 36. 8U 的 恒定 体温 是 至 关 重 要 的 ,0.ST RE E U t A 
产生 病态 。 那 么 在 0 一 100 人 CC 这样 大 的 范围 内 ,人 体 是 如 何 求 出 如 
”此 精确 的 最 佳 体 温 的 呢 ? 这 绝对 不 是 梯度 下 降 等 方法 所 能 算出 
的 ,而 我 们 也 相信 目前 的 解析 方法 远 远 无 法 完整 描述 体温 、 人 体 结 
鬼 与 环境 间 错 综 复杂 的 关系 。 自 然 演 化 的 规律 是 达尔 文 发 现 的 ， 
它 的 核心 思想 是 : 物 竟 天 择 . 适 者 生存 。 它 对 人 类 的 作用 与 影响 不 
亚 于 牛顿 的 万 有 引力 学 说 ,而 奇怪 的 是 这 一 理论 时 至 今日 才 被 应 
用 于 工程 实践 。 

遗传 算法 是 一 种 更 为 宏观 意义 下 的 仿生 算法 , 它 模仿 的 机 制 
是 一 切 生命 与 智能 的 产生 与 进化 过 程 。 它 通过 模拟 达尔 文 “ 优 胜 
劣 涩 、 适 者 生存 "的 原理 激励 好 的 结构 ;通过 模拟 孟 德 尔 遗 传 变 异 
理论 在 兴 代 过 程 中 保持 已 有 的 结构 ,同时 寻找 更 好 的 结构 。 作 为 
一 种 随机 的 优化 与 楼 索 方法 ,遗传 算法 有 着 其 鲜明 的 特点 : 

(1) 遗传 算法 的 操作 对 象 是 一 组 可 行 解 , 而 非 单 个 可 行 解 ; 搜 
索 轨 道 有 欠条 ,而 非 单 条 ,因而 具有 良好 的 并 行 性 。 
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(2) 遗传 算法 只 需 利用 目标 的 取 值 信息 ,而 无 需 梯度 等 高 价 
值 信息 ,因而 适用 于 任何 大 规模 高度 非 线性 的 不 连续 多 峰 函 数 的 
优化 以 及 无 解析 表达 式 的 目标 函数 的 优化 ,其 有 很 强 的 通用 性 。 

(3) 遗传 算法 择优 机 制 是 一 种 “ 软 ” 选 择 , 加 上 其 良好 的 并 行 
性 ,使 它 具 有 良好 的 全 局 优化 性 和 稳健 性 。 

(4) 过 传 算法 操 必 的 可 行 解 集 是 经 过 编码 化 的 { 通 常 采用 二 
进 制 编码 ), 目 标 硝 数 解释 为 编码 化 个 体 ( 可 行 解 ) 的 适应 值 , 因 而 
具有 良好 的 可 操作 性 与 简单 性 。 


0-2 ”遗传 算法 的 发 展 与 现状 


遗传 算法 的 产生 归功 于 美 情 Michigan 大 学 的 Holland 在 20 
世纪 60 ERR ,70 年 代 初 的 开创 性 工作 ,其 本 意 是 在 人 工 适 应 系 
统 中 设计 的 一 种 基于 自然 演化 原理 搜索 机 制 。 大 约 在 同 -- 时 间 ， 
Foegl 和 Rechenberg Æ Schwefel, 引入 了 另 两 种 基于 自然 演化 原 
理 的 算法 ,演化 程序 (evolutionary programming) 和 演化 策略 
(evolution strategies)。 这 三 种 算法 构成 了 目前 演化 计算 
(evolutionary computation) 领 域 的 三 大 分 支 , 它 们 从 不 同 层次 .不 
局 负 讼 模拟 自然 演化 原理 ,以 达到 求解 问题 的 自 的 。 

Holland 不 仅 设 计 了 遗传 算法 的 模拟 与 操作 原理 ,更 重要 的 
是 ,他 运用 统计 决策 理论 对 遗传 算法 的 搜索 机 理 进 行 了 理论 分 析 ， 
建立 了 著名 的 Schema 定理 和 隐 含 并 行 性 (implisit parallelism) A 
理 ,为 遗传 算法 的 发 展 葛 定 了 基础 。 将 遗传 算法 应 用 王 函 数 优化 
始 于 De Jong ,他 在 其 博士 论文 中 设计 了 一 系列 遗传 算法 的 执行 策 
略 和 性 能 评价 指标 ,对 遗传 算法 性 能 做 了 大 量 的 分 析 。De Jong 的 
在 线 (on-line) 和 离线 (off-line) 指 标 仍 是 目前 衡量 遗传 算法 性 能 的 
主要 手段 ,而 他 精心 挑选 的 5 个 试验 函数 ( 称 作 De Jong's five test 
funetions) 也 是 目前 遗传 算 靶 数值 试验 中 用 得 最 多 的 试验 函数 。 
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在 Holland 和 De Jong 的 工作 之 后 ,遗传 算法 经 历 了 一 个 相对 
平稳 的 发 展 时 期 , 逐 汤 被 人 们 所 接受 和 和 运用。 遗传 算 法 的 发 展 高 
潮 开 始 于 20 He 80 FRR MARRS. AM ie BRM 
趣 的 日 益 增 长 有 两 个 背景 :其 一 是 工程 领域 ,特别 是 人 工 智 能 与 控 
制 领域 ,不 断 育 现 出 超大 规 摸 的 非 线性 系统 ,在 这 些 系统 的 研究 中 
存在 着 大 量 的 经 典 优化 方法 所 不 能 有 效 求 解 的 优化 问题 ,诸如 神 
经 网 络 连 接 权 重 及 网 络 拓扑 结构 的 优化 .模糊 系统 中 模糊 规则 的 
选取 及 隶属 郴 数 的 确定 .知识 库 的 维护 与 更 新 等 等 ;其 二 ,遗传 算 
法 本 身 就 是 一 种 模拟 自然 演化 这 一 学 习 过 程 的 求解 问题 方法 , 它 
能 以 独立 的 或 与 其 它 方法 相 结 合 的 形式 用 于 智能 机 器 学 习 系 统 的 
设计 中 。 经 过 近 10 年 的 努力 ,遗传 算法 不 论 是 在 应 用 上 .算法 设 
计 上 ,还 是 在 基础 理论 上 , 均 取 得 了 长 足 的 发 展 ,已 成 为 信息 科学 、 
计算 机 科学 .运筹 学 和 应 用 数学 等 诸多 学 科 所 共同 关注 的 热点 研 
究 领 域 。 


1. 遗传 算法 在 神经 网 络 ,模糊 系统 和 机 器 学 习 中 的 应 用 


在 应 用 中 ,遗传 算法 几乎 渗透 到 从 工程 到 社会 科学 的 诸多 领 
域 ,我们 无 法 在 此 一 一 列举 。 这 里 简略 介绍 遗传 算法 与 神经 网 络 、 
MAPLES THAAD AFT. 

神经 网 络 的 学 习 包 含 了 两 个 优化 过 程 ,分 别 是 网 络 连接 权重 
的 优化 和 网 络 拓扑 结构 的 优化 。 优 北 连 接 权重 最 著名 的 方法 是 
Rumelhart 提出 的 基于 梯度 下 降 法 的 反 向 传播 法 (backpropaga- 
tion, BP), BP 算法 的 最 大 能 点 是 局 部 极 小 问题 和 无 法 学 习 网 络 
拓扑 结构 。 和 因为 一 种 通用 人 性 和 全 局 性 良好 的 优化 技术 ,遗传 算法 
用 于 神经 网 络 的 训练 就 是 很 自然 的 事情 。 遗 传 算法 用 于 神经 网 络 
的 学 习 相 分 为 三 个 不 同 的 层次 :连接 权重 的 学 习 .网 络 拓 扑 的 学 习 
以 及 网 络 学 习 规 则 的 学 习 。 目 前 ,遗传 算法 已 广 泛 用 于 前 向 网 络 
(feedforward networks), 径 向 基 网 络 (radial basis function net- 
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works) .Kohonen 特征 映射 点 Recurrent 网 络 等 各 种 人 工 神 经 网 络 
的 训练 与 设计 中 。Yao 在 其 两 篇 文章 中 对 遗传 算法 在 神经 网 络 中 
的 应 用 和 做 了 详细 的 综述 ,并 把 基于 演化 计算 的 神经 网 络 系统 ( 称 作 
演化 式 神 经 网 络 evolutionary artificial neural networks) tE Æ — FF 
一 般 的 自 通 应 学 习 模 型 加 以 研究 。 

被 Zadeh 称 必 软 计算 Csoft computing) 的 两 大 组 成 部 分 一 一 过 
传 算 靶 与 模糊 系统 的 相互 融合 也 是 近年 人 们 所 关注 的 话题 。 模 糊 
系统 是 对 人 类 处 理 模 糊 性 概念 及 其 推理 机 制 的 模拟 。 最 初 ,在 模 
愧 系统 的 设计 中 ,推理 方法 的 选取 .隶属 函数 形状 及 参数 的 选取 、 
相关 权重 的 确定 以 及 规则 库 的 确定 , 均 是 由 专家 根据 实际 经 验 指 
定 的 ,这 也 曾 被 认为 是 模糊 系统 较 之 经 典 和 解析 模型 的 一 大 优点 。 
但 蚌 大 们 也 发 现 , 对 设计 好 的 模糊 系统 中 的 一 些 参数 基于 数据 进 
行 调 谐 可 大 大 提高 模糊 系统 的 性 能 ,同时 也 有 大 量 学 者 研究 了 基 
于 经 典 优化 的 模糊 系统 训练 学 习 , 大 部 分 可 纳入 模糊 神经 网 络 
(fuzzy neural networks) HER. BERR ARES ATE ASH 
设计 中 FRET T oy R bak t. WP SE ELIR EDA B T 38 
函数 形状 与 参数 的 优化 ,系统 相关 权重 的 优化 以 及 推理 规则 的 选 
取 。 此 外 ,模糊 集 技 术 也 被 用 于 遗传 算法 的 某 些 方面 , 形 或 称 作 模 
糊 GA 的 新 型 遗传 算法 ,以 期 达到 改进 经 典 遗 传 算法 的 目的 。 

大 多 数 机 器 学 习 系 统 都 有 一 个 共同 的 特征 , 即 具 备 对 自身 结 
构 进 行 调整 的 能 力 , 从 而 达到 改进 性 能 .发 现 并 利用 有 意义 的 概 
念 ,或 者 改进 其 内 部 知识 结构 的 一 致 性 和 通用 性 ,Holland 最 初 引 
进 遗 传 算法 的 目的 也 正 是 在 自 适 应 学 习 统计 中 设计 一 种 有 效 的 搜 
索 机 制 。 把 遗传 算法 用 于 机 器 学 习 系 统 仍 是 自前 遗传 算法 应 用 上 
十 分 活 牙 的 领域 。 这 一 方面 最 著名 的 例子 就 是 所 谓 的 分 类 系统 
(classifer system) , 它 是 遗传 算法 与 机 器 学 习 中 经 典 的 生产 式 系 统 
(production system) 相 结合 的 产物 ,并 成 功 应 用 于 石油 管道 设计 、 
神 党 系统 的 控制 以 及 布尔 函数 的 推断 。 遗 传 算法 也 可 用 于 有 导师 
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ÈT -] (supervised concept learning) .特征 选取 与 重 构 及 强迫 学 
“J (reinforcement [earning) 等 机 器 学 习 领 城 。 


2. 遗传 算法 设计 与 执行 策略 


遗传 算法 操作 的 是 一 群 编码 化 的 可 行 解 , 称 作 种 群 。 它 通过 
种 群 的 更 新 与 迁 代 来 搜索 全 局 最 优 解 。 种 群 的 迭代 是 通过 选择 、 
杂交 和 变异 等 具有 生物 意义 的 遗传 算 子 来 实现 的 。 在 Holland 的 
最 初 模型 中 采用 的 是 二 进 制定 长 编码 和 固定 规模 种 群 ,遗传 算法 
的 主要 形式 为 比例 选择 SAREE. ATR BRE 
的 性 能 ,克服 实际 问题 中 过 到 的 杀 难 ,近年 来 在 算法 设计 与 执行 策 
略 方面 有 了 很 大 进展 。 

(1) 编码 方法 简单 二 进 制 编码 的 采用 得 到 了 Holland 早期 
理论 结果 (Schema 定理 ,最 小 字母 表 原 理 ) 的 支持 ,但 它 仍 有 许多 
不 足 之 姓 。 厌 色 编 码 可 玫 于 克服 二 进 制 编码 映射 的 不 连续 问题 
《 即 欧 氏 室 间 中 邻近 点 的 二 进 制 编码 在 Hamming 距离 下 并 不 邻 
近 )。 动 态 参 数 编码 (dynamic parameter encoding) 的 提出 是 为 了 
克服 搜索 效率 与 表示 精度 间 的 矛盾 ,同时 对 克服 过 早 收 敏 现 象 也 
有 所 帮助 。 此 外 ,多 值 编码 、 实 值 编 码 . 区 间 值 编码 Delta 编码 等 
多 种 编码 方法 也 被 证 明 各 有 优 缺 点 。 这 些 编码 方法 的 所 出 是 启发 
式 的 ,缺乏 一 个 理论 基础 来 判断 各 种 编码 方法 的 好 坏 并 指导 它们 
的 设计 。 

(2) 选择 机 制 ”选择 是 遗传 算法 中 最 主要 的 机 制 , 也 是 影响 
遗传 算法 性 能 最 主要 的 因素 。 选 择 压 {selective pressure HR TH 
择 栅 制 挑选 种 群 中 不 同 个 体 做 母体 的 概率 大 小 的 差异 。 选 择 压 过 
大 ,会 造成 几 个 较 好 可 行 解 (不 一 定 是 近似 全 局 最 优 解 ) 迅 速 抢占 
了 整个 种 群 ;选择 于 过 小 , 则 会 使 算法 呈现 出 纯粹 的 随机 徘 徊 行 
为 。 秩 选择 . 通 应 值 函 数 的 尺度 变换 均 是 为 了 克服 经 典 的 比例 选 
择 所 造成 的 选择 压 过 大 或 过 小 而 设计 的 。 赤 出 者 选择 felitist se- 
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Iection) 则 通过 无 条 件 地 保留 每 代 种 群 中 最 优 者 而 克服 了 比例 选 
择 下 遗传 算法 不 能 依 概 率 收 伍 到 全 局 最 优 解 的 问题 。 然 而 正如 
De Jong 指出 的 , 现 有 的 遗传 算法 理论 无 法 对 这 些 现 象 做 出 完善 
的 解释 和 提供 指导 。 

(3) 杂交 与 变异 机 制 ” 杂 交 与 变异 是 遗传 算法 中 最 有 具 争议 性 
的 两 种 桃 制 。 争 议 的 焦点 是 : 单 点 杂记 .多 点 杂交 与 均匀 杂交 的 优 
沙 ; 杂 变 机 制 与 变异 机 制 的 优 劣 。 经 典 的 观点 强调 杂交 的 作用 ,而 
认为 变异 只 是 一 个 背景 机 制 ,并 且 认 为 在 杂 变 机 制 中 强度 最 弱 的 
单 点 杂交 是 最 好 的 。 这 一 观点 与 生物 学 中 的 实际 观察 是 相符 会 
的 ,但 作为 设计 人 工 求解 问题 方法 的 思想 , 它 正 受 到 理论 与 实践 两 
方面 的 挑战 。 

单 点 杂交 优 于 多 点 .均匀 杂交 的 观点 是 建立 在 Holland 的 
Schema 定理 基础 上 的 ,但 Schema 定理 中 只 考虑 了 杂交 的 玻 坏 作 
用 ,而 未 考虑 其 建设 性 作用 ,因此 推出 "杂交 强度 应 弱 ” 的 结论 至 少 
在 逻辑 上 是 不 成 立 的 ( 语 用 同样 的 推理 思路 ,大 至 可 以 得 出 不 要 末 
变 机 制 是 最 好 的 )。 同 时 ,也 有 越 来 越 多 的 实验 结果 显示 强度 较 大 
的 多 点 .均匀 杂交 优 于 单 点 杂交 。 

强调 杂交 作用 的 观点 是 基于 遗传 算法 中 著名 的 建筑 块 假设 
(building block hypothesis), 而 这 一 假设 并 未 得 到 理论 证 明 。 另 
外 ,在 演化 计算 的 男 一 分 支 一 一 演化 策 上 略 中 并 未 用 到 任何 形式 的 
杂交 机 制 ,但 并 不 项 得 它 成 为 一 种 有 效 的 优化 技术 。 有 鉴于 此 , 尽 
管 有 大 量 为 杂交 机 制 辩 护 的 结果 ,也 有 许多 学 者 正 从 理论 和 实验 
两 个 方面 探讨 变异 机 制 在 遗传 算法 中 所 起 的 比 杂 交 更 显著 .但 又 
鲜 为 人 知 的 作用 。 

此 外 ,在 杂交 .变异 概率 的 适应 性 调整 ,最 优 变 异 概 率 的 确定 ， 
基于 知识 的 启发 式 杂 交 机 制 的 设计 ,种群 规模 的 选取 等 方面 , 均 有 
理论 与 实验 上 的 进展 。 

(4) 执行 策略 的 改进 ”除了 关于 世代 型 GA(generational GA) 
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和 稳定 状态 型 GA{steady state GA) 的 比较 研究 仍 在 进行 以 外 ,在 
执行 策略 方面 的 下 列 儿 方面 工作 值得 注意 : 

a. 遗传 算法 与 模拟 退火 算法 的 结合 

MIR k (simulated annealing)} 是 一 种 基于 热力 学 理论 的 优化 
方法 ,并 有 着 完善 的 全 局 收 禾 理论 。 在 遗传 算法 中 以 各 种 形式 融 
人 模拟 退 天 思想 ,从 而 使 得 遗传 算法 在 理论 上 具有 全 局 收 敏 性 ,是 
一 个 有 意义 的 研究 方向 。 

b. 遗传 算法 与 局 部 优化 方法 的 结合 

把 遗传 算法 与 局 部 搜索 方法 有 机 结合 起 来 ,是 改进 遗传 算法 
性 能 的 -- 个 卓有成效 的 方法 。 这 种 混合 型 遗传 算法 不 但 模拟 了 生 
物种 群 的 学 习 过 程 ,而 且 事 实 上 还 模拟 了 种 群 欧 个 体 在 其 生命 周 
期 内 具有 学 习 行 为 这 一 生物 现象 。 这 在 生物 学 中 称 作 lamarckian 
evolution 和 baldwin effect. 

c. FAT FE (parallel genetic algorithm) ; 

并 行 遗传 算法 是 在 遗传 算法 的 实施 中 加 入 自然 生物 种 群 中 的 
空间 结构 因素 , 它 的 目的 是 可 以 在 大 规模 并 行 机 上 运行 ,即使 是 序 
列 式 实施 并 行 遗 传 算法 ,也 可 克服 经 典 遗 传 算法 性 能 上 的 不 足 ,从 
而 提高 算法 的 效率 。 并 行 遗传 算法 大 致 分 为 两 种 ;一 种 是 岛 模型 
(island model) , 称 作 粗 粒 并 行 遗 传 算法 {coarsegrained PGA); 另 一 
种 是 细胞 模型 (cellular model), 称 为 细 粒 并 行 遗 传 算法 (fine- 
grained PGA)。 岛 模型 的 实施 方法 是 在 几 个 独立 按 经 典 GA 方式 
运行 的 种 群 ( 称 作 子 名 群 } 中 加 入 迁移 (migration) 因 素 ; 而 细胞 模 
型 的 实施 则 是 在 一 个 单一 种 群 中 ,通过 对 经 典 整 体 性 选择 与 杂交 
机 制 的 局 部 化 来 达到 并 行 化 目的 。 岛 模型 考虑 的 是 种 群 的 空间 结 
构 , 而 细胞 模型 考虑 的 是 一 种 群 中 个 体 的 空间 结构 。 

d. 共存 演化 遗传 算法 (cooperative coevolutionary GA, 
CCGA) 

这 一 方法 的 思想 是 生物 个 体 间 不 但 有 竞争 ,而且 还 具有 合作 
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行为 。CCGA 通过 把 复杂 问题 分 解 为 数 个 子 问题 ,通过 代表 这 些 
于 问题 的 个 体 间 弃 合 作 又 竞争 的 演化 过 程 ,达到 求解 问题 的 目的 。 

e. 混乱 遗传 算法 (messy genetic algorithm) 

混乱 遗传 算法 是 由 Goldberg 提出 的 , 它 的 目的 是 解决 经 典 
GA 中 所 谓 的 联结 问题 (inkage problem), 即 经 典 GA 很 容易 破坏 
定义 位 置 较 远 的 模式 的 问题 。 在 混乱 遗传 算法 中 ,个 体 由 其 每 个 
分 量 的 位 置 与 取 值 共同 表示 ,位 置 可 以 不 按 次 序 排列 ,也 并 不 是 所 
有 分 量 都 在 个 体 的 表示 中 出 现 。 事 实 上 ,混乱 幅 传 算法 直接 操作 
的 对 象 既 有 个 体 , 也 有 Schema, XX ARE BRT ARE Pik 
经 典 GA 所 具有 的 隐 含 并 行 性 。 混 乱 遗 传 算法 的 理论 基础 .算法 
设计 及 实验 比较 , 均 是 有 待 探讨 的 课题 。 


0-3 ”遗传 算法 的 基础 理论 研究 


过 传 算法 早期 的 基础 理论 主要 是 Holland 的 Schema 定理 及 
隐 含 并 行 性 原理 ,后 来 又 有 了 建筑 块 假设 (building block hyothe- 
sis). 但 是 ,Schema 定理 却 元 法 解释 遗传 算法 实际 操作 中 的 许多 
现象 , 隐 含 并 行 性 的 论证 存在 严重 的 漏洞 ,而 建筑 块 假设 却 从 未 得 
到 过 哪怕 是 启发 式 的 证 明 。 目 前 ,关于 遗传 算法 基础 理论 的 研究 
在 三 个 方面 进行 着 ,它们 是 :Schema 理论 的 拓 广 与 深入 ;遗传 算法 
的 马 氏 链 分 析 :遗传 算法 的 收 煞 理论 。 


1. Schema 理论 的 拓 广 和 深入 


这 一 方面 的 工作 主要 包括 Schema 公式 的 进一步 讨论 与 丘 
Jo Radeliffe 在 其 一 系列 工作 中 ,把 Schema 分 析 进 行 了 一 般 化 ， 
提出 完整 的 forma 分 析 理 论 。 在 解决 建筑 块 假 设 成 立 与 否 的 问题 
上 ,目前 的 工作 主要 集中 在 所 谓 遗 传 算法 的 散 骗 医 数 (decetive 
functions) 的 研究 上 。 所 谓 欺 骗 函 数 就 是 那些 对 遗传 算法 进行 误 
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导 , 使 其 错误 地 收 合 到 非 全 局 最 优 解 状态 的 函数 。 一 旦 研究 清楚 
一 个 弹 数 是 遗传 算法 获 骗 函数 的 条 件 , 也 就 给 出 了 建筑 块 假设 成 
立 的 条 件 。 研 究 欺 骗 函数 问题 的 主要 方法 是 Walsh 变换 。 但 对 于 
确实 有 严重 漏洞 的 隐 含 并 行 性 原理 ,目前 尚未 有 人 提出 改进 办 法 ， 
人 们 对 这 一 遗传 算法 至 关 重 要 的 优点 只 是 加 以 主观 信念 上 的 默认 
与 支持 。 


2. 遗传 算法 的 马 氏 链 分 析 


近年 来 ,人 们 建立 起 了 遗传 算法 不 同形 式 的 蕊 氏 链 模型 ,对 遗 
传 算法 的 极限 行为 进行 了 各 种 角度 的 刻画 。 遗 传 算法 的 马 氏 链 模 
型 主要 有 三 种 ,分 别 是 种 群 马 氏 链 模 型 Vose 模型 和 Cerf 扰动 马 
氏 链 模型 。 

种 群 马 氏 链 模型 将 遗传 算法 的 种 群 选 代 序列 视 为 一 个 有 限 状 
态 马 氏 链 来 加 以 研究 。 最 早 的 工作 属于 Goldberg。 主 要 是 运用 种 
群 马 氏 链 转 移 概 率 抢 阵 的 某 些 一 般 性 质 , 分 析 遗 传 算法 的 极限 行 
为 ,但 转移 概率 的 具体 形式 很 难 囊 达 , 这 妨碍 了 对 遗传 算法 有 限时 
间 行 为 的 研究 。 

在 Vose 模型 中 ,种 群 的 状态 由 一 个 概率 向 量 表示 ,概率 向 量 
的 维 数 为 所 有 可 能 个 体 的 数目 ,第 ;个 分 量 表示 第 ; 个 个 体 在 种 群 
的 个 数 比 例 (相对 频率 )。 当 种 群 规模 趋 于 无 穷 大 时 ,相对 频率 的 极 
限 就 代表 了 每 一 个 个 体 在 种 群 中 出 现 的 概率 ,无 限 种 群 规模 假设 
下 ,可 以 导出 表示 种 群 的 概率 向 量 的 选 代 方程 。 通 过 对 这 一 选 代 方 
程 的 研究 ,可 以 探讨 种 群 概 率 向 芋 的 不 动 点 长 其 稳定 性 ,从 而 导致 
对 遗传 算法 极限 行为 的 刻画 ,虽然 在 无 限 种 群 假设 下 ,Vose 模型 
可 给 出 遗传 算法 极限 行为 的 刻画 ,但 它们 解释 实际 有 限 种 群 遗传 
算法 行为 的 能 力 相 对 差 一 些 。 另 有 一 些 工作 则 直接 把 种 群 相对 频 
率 序 列 当做 一 个 马 氏 链 加 以 研究 。 

法 国学 者 R.Cerf 在 其 一 系列 工作 中 ,利用 Azencott, Catoni, 
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Trouve 等 人 基于 模拟 退火 和 广 妾 模拟 退火 的 一 系列 漂亮 工作 ,将 
遗传 算法 看 成 - -种 特殊 形式 的 广 关 模拟 退火 模型 ,利用 动力 系统 
的 随机 扰动 理论 ,对 遗传 算法 的 极限 行为 及 收 伊 速度 进行 了 研究 。 
尽管 在 Cerf 模型 中 所 研究 的 马 氏 链 序列 仍然 是 种 群 序 列 , 但 由 于 
研究 方法 与 种 群 马 氏 链 模型 的 差异 ,我 们 将 它 称 做 Cerf 扰动 马 氏 
链 模型 。 

LRU SARA FR ORR ORAS, A 
传 算 法 行为 的 解释 能 力 最 强 。 但 遗憾 的 是 ,由 于 对 该 马 氏 链 转移 概 
率 股 有 一 个 深刻 丽 细致 的 描述 ,目前 所 得 结果 仅仅 用 到 了 变异 机 
制 所 导致 的 遍历 性 ,因而 只 是 形式 上 的 ;并 且 , 所 得 到 的 算法 收效 
或 不 收 伍 结果 的 证 明 方 法 与 纯 随 机 抽样 算法 相应 结果 的 证 明 方法 
在 基本 思想 上 无 本 质 区 别 , 并 没有 利用 到 遗传 算法 独 有 的 特性 。 
Vose 模型 在 理论 上 得 出 了 一 些 形 式 复 杂 和 漂亮 的 结果 ,但 这 些 结 
果 对 遗传 算法 行为 的 解释 性 不 强 ,Vose 模型 的 深 人 研究 也 许可 以 
使 遗传 算法 研究 中 用 上 已 在 群体 遗传 学 上 成 功 运 用 的 随机 分 析 方 
法 oCerf 的 扰动 马 氏 链 模型 得 到 了 目前 最 完整 的 收 敏 性 结果 ,而 
且 有 和 希望 进一步 深入 .不足 的 是 , 它 仍 要 很 设 种 群 规 模 趋 于 无 穷 
Ke 


3. 过 传 算 法 的 收效 理论 


对 于 遗传 算法 的 马 狼 链 分 析 本 身 , 即 是 建立 遗传 算法 的 收 化 
性 理论 -早期 的 大 多 数 文章 ,都 是 通过 马 氏 链 的 极限 理论 分 析 遗 传 
算法 的 收敛 性 。 近 几 年 来 ,我 们 的 几 位 同事 ,如 徐 宗 本 教授 EK 
教授 .高勇 副教授 . 张 讲 社 副 教授 等 ,在 遗传 算法 收 伍 性 方面 进行 
了 深入 的 研究 ,用 奠 方法 与 选 代 方法 得 到 了 比较 系统 的 结果 。 

就 遗传 算法 的 目标 来 看 ,是 寻求 全 局 最 优 解 ,而 完成 的 这 程 是 
一 个 随机 搜索 过 程 , 普 希 望 这 个 过 程 在 期 望 值 意义 下 越 来 越 好 ,这 
样 自然 应 当 是 一 个 下 擂 序 列 , 利 用 歉收 但 定 理 进 一 步 证 明 跟 传 算 
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法 的 收 敏 性 。 同 时 也 看 到 为 了 保证 遗传 算法 的 收 和 敛 性 ,有 两 个 参数 
是 非常 重要 的 :一 个 参数 是 过 程 进 人 满意 解 后 下 一 步 脱 离 满 意 解 
集 的 可 能 性 ; 另 一 个 参数 是 过 程 未 进 人 满意 解 时 下 一 步 仍 不 能 进 
入 满 意 解 的 可 能 性 ,这 两 个 参数 的 匹配 构成 了 遗传 算法 收 敲 的 一 
舱 理 论 , 用 这 种 方法 研究 收 合 性 变 为 纯 概 率 的 方法 ,直观 且 简 练 地 
证 明了 多 种 遗传 算法 的 收敛 性 。 

遗传 算法 是 ~ 种 仿生 优化 算法 ,是 人 类 向 其 自身 演化 过 程 学 
习 的 结果 。 但 是 到 是 前 为 止 , 它 始 终 未 能 对 自身 演化 本 身 的 研究 发 
生 作用 ,而 县 就 其 实质 来 讲 ,自前 的 遗传 算法 学 习 大 类 演化 过程 还 
只 是 形式 的 ,尚未 能 刻画 人 自身 的 演化 过 程 ,更 未 能 刻画 神经 元 思 
维 真实 学 习 过 程 ,因此 遗传 算法 就 其 模型 本 身 来 讲 需要 更 加 深入 
的 探讨 月 前 遗传 算法 的 研究 仅仅 是 一 个 开端 ,有 必要 从 更 高 的 高 
度 与 更 加 广阔 的 视野 审视 遗传 算法 的 现状 ,并 为 未 来 探讨 出 一 条 
新 路 。 


遗传 算法 的 几何 理论 


遗传 算法 是 一 种 仿生 算法 , 即 模拟 生命 演化 的 算法 。 它 是 从 一 
个 初始 种 群 出 发 ,不 断 重复 执行 选择 、 杂 交 和 变异 的 过 程 , 使 种 群 
进化 越 来 越 接近 某 一 目标 -如 果 视 种 群 为 超 空间 的 一 组 点 ,选择 、 
杂交 和 变异 的 过 程 即 是 在 超 空 间 中 进行 点 集 之 间 的 某 种 变换 , 通 
过 信息 交换 使 种 群 不 断 进化 。 


1-1 遗传 算法 的 基本 概念 


遗传 算法 被 认为 是 对 人 类 自然 演化 过 程 的 模拟 。 人 类 的 自然 
演化 过 程 是 进化 过 程 ,这 种 进化 过 程 发 生 在 染色 体 上 ;自然 选择 使 
适应 值 好 的 染色 体 比 那些 适应 值 差 的 染色 体 有 更 多 的 繁殖 机 会 ; 
变异 可 以 使 子 代 和 染色 和 体 不 同 于 父 代 染 色 体 ;通过 两 个 父 代 染 色 体 
的 结合 与 重组 可 以 产生 全 新 的 和 染色体。 染色 体 的 选择 、 变 异 与 重组 
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进程 星 无 记忆 的 。 将 这 些 概念 反映 在 数学 上 就 形成 了 遗传 算法 的 

定 久 1.1.1( 个 体 和 合体 空间 ) OI 个体 X, 即 是 长 度 为 ! 
的 0 和 字符 串 ,简称 个 体 ;;! 称 作 个 体 的 链 长 ,7- 个 体 的 全 体 记 作 
S = 10,11’, 称 为 个 体 空 间 。 

例 1.1.1 对 于 一 个 饭店 的 经 营 决 策 , 考 虑 三 个 因素 :价格 、 
饮料 与 服务 速度 ,三 个 因素 称 为 三 个 变量 。 对 于 价格 ,用 “0” 表示 
价格 高 ,由 1 表示 价格 低 ;对 于 饮料 ,用 0” 表示 唾 酒 ,用 1” 表示 
可 乐 ;对 于 服务 速度 ,用 0" 表示“ 慢 ", 用 1 oR th HE Z 

X = (011) 
表示 个 体 ,个 体 的 链 长 !L=3,S= [0,1 884 iËk.x = (011) 
表示 采用 高 价格 ,可乐 饮料 和 服务 速度 快 的 经 营 决 策 。 

按照 遗传 学 的 术 请, 个 体 也 称 作 染色 体 (chromosome) ,个 体 的 
分 量 称 作 基 因 {gene) ,分量 的 取 值 称 作 等 位 基因 (allele)。 

例 1.1.2{( 函 数 优 化 问题 设 F(x) 是 nn 维 实数 空间 R" 到 正 
SRR 的 函数 ,对 于 工艺 R° 可 与 一 个 长 度 为 /的 二 进 制 对 应 ,于 
是 求解 maxF(x) 的 问题 下 以 转化 为 求解 

max! f(X); X € Joal] 
其 中 

FX) = S(F(¿!(X))) 
e ÆR 10,1} 的 编码 映射 ,S 是 R' AR 的 增 函 数 , 通 常 末 用 
的 二 进 制 编码 映射 为 固定 长 度 ! 的 二 进 制 编码 。 二 进 制 编码 称 为 
个 体 , 长 度 上 的 二 进 制 编 码 全 体 称 为 个 体 空 间 。 二 进 制 编码 可 以 是 
实数 的 二 进 制 表示 ,也 可 以 是 按照 某 种 规则 进行 的 二 进 制 编码 ,但 
是 要 求 二 进 制 编码 与 实数 之 间 一 一 对 应 ,例如 在 [0,31] 的 整数 上 
RFs) = 2 的 最 大 值 ,可 直接 利用 实数 的 二 进 制 表示 ,XX = 
(10111) #1644424 1 = 23。 问 题 转化 为 求解 
max! f(X); X € [0,111 
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JX) = Fle '(X)) 
其 中 e 为 二 进 制 编码 方式 。 
-~- 般 地 ,一 个 个 体 的 分 量 可 以 在 站 ,1,…,&1 中 取 值 ,这 时 个 
Ea lj 3; 
S= 10,1,---, a}! 
定义 1.1.2( 种 群 和 种 群 空间 ) 所谓 N- PHREN 个 个 体 组 
mie See (PAR SCE BE), PRE ON 称 作 种 群 规 模 , 称 
SY = {X= (XX X), X € SGUN) 
为 N- 种 群 空间 。 
例 1.1,.3( 续 例 1.1.1) 对 于 一 个 饭店 的 经 营 决 策 , 一 个 个 体 
圳 示 一 :种 经 营 决策 , 则 


Xi = (01 1) 
X, = (001) 
X, = (110) 
X, = (010) 
表示 4 种 经 营 决策 。 于 是 


X, = (X,,X,,X,, X,) 
为 种 群 规模 N = 4 的 种 群 。 
对 于 一 个 种 群 , 它 的 个 体 可 以 是 相同 的 ,例如 
X, = (X, ,X.,,X,, X.) 
也 是 一 个 种 群 规模 N = 4 的 种 群 ,但 实际 上 它 只 有 两 个 不 重复 的 
个 体 。 
对 于 一 个 种 群 ,由 于 是 由 个 体 椅 成 的 ,因此 它 是 个 体 空间 的 一 
部 分 , 即 是 个 体 空间 的 一 个 子 集 。 我 们 可 以 记 为 XC S,X,C S, 
“AX, CSH, RX, B— TE, H X, C S 时 ,表示 六, 中 
不 重复 的 个 体 是 S 中 的 一 个 子 集 。 这 时 X, fl X, 都 不 视 为 向 量 。 
如 果 视 X 为 向 量 , 则 X 可 表示 为 矩阵 形式 。 如 ， 
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0 1 
x i0 0 
h 0 
0 1 1 
其 中 每 - 行 代 表 一 个 个 体 , 第 i 行 表示 第 ; 个 个 体 。 
对 于 链 长 为 上 种 群 规 模 为 A 的 种 群 可 以 表示 为 N x MER: 


m j d 


l l 
0 1 
1 0 
1 0 


Tu Pu Y u | 
= Fa £32 Tyu 
X = . 

TA s U TN 


其 中 
X, 一 【Ta ty) 
为 一 个 个 体 。x; 表示 第 i 个 个 体 第 ) 个 基因 取 值 。 
定义 1.1.3( 齐 次 种 群 ) 称 N- 种 群 是 齐 次 种 群 , 若 对 于 任意 
i,j < NN 有 X= X, ,用 矿 表 示 齐 次 种 群 的 全 体 。 
显然 BY COSY MFA RMR STH LATS 
的 个 体 。 因 此 ,全 中 的 数目 应 与 个 钵 空间 S 中 的 数目 相同 , 即 
[pv l=tS 
其 中 | .1 表示 集合 中 元 素 的 个 数 。 
对 于 链 长 ! 的 个 体 空间 ， 


1S |= 2! i SY (= 2™ 

IB i= Sis x 
例如 在 例 1.1.1 中 

I\Si=|pPt=2 =8 
Et 1.1.3 中 


I SN | = 223 = 4096 
定义 1.1.4 WEXES,XE 3, 记 
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g(X,X) = D x. Xi) 
其 中 X 表示 A 的 示 性 函数 ,p( 总 ,XX) 表示 种 群 六 包含 个 体 X 的 数 
目 。 称 两 个 种 群 X MY 是 等 价 的 ,车 对 于 任意 XE 人 有 
p(X,X) = 9 ¥,X) 
记 作 关 — Y. 
X- 表示 两 层 意思 :一 是 区 与 Y PRAM MES -是 
革 与 了 中 含有 的 相同 的 全 体重 复 的 次 数 一 样 多 .因此 ,站 一 了 表 
AY 是 XX 中 的 个 体 次 序 的 某 种 变换 。 
定理 1.4.1 “~” E SY" 上 的 等 价 关系 。 
证 明 ”首先 易 证 闫 一 着。 车 Y WY- X ME X — Y, 
Y ~Z,WUFER X € S 有 
g(X¥,X) = e(Y,X) = e(Z,X) 
TE X ~Z, 
定理 1.1.2 等 价 关系 “一 ”在 SY 上 诱导 的 等 价 类 划分 x = 
SN, — 的 个 数 为 
N +2' — 1 
2-1 
证 明 ”根据 定义 1.1.4 等 优 类 划分 与 集合 


>: 
@ = [gripes spy hip 为 非 负 整数 ,> = N| 
一 一 对 应 。 根 据 组 合 学 原理 则 证 | Bi = Zç 
考 患 例 t.14.1 中 ! = 3,N = 4, 于 是 种 群 空间 的 个 数 为 2 
2° = 4 096, 个 体 空间 为 2 = 8, 而 等 价 类 空间 yA 
ye (*28" 4) 加 
8-1 7 


li!  ilx1l0x9x8 _ 
í = 


= 37141 4 330 


18 遗传 算法 的 数学 基础 


这 样 等 价 类 种 群 个 数 为 330 , 与 种 群 空间 个 数 4 096 比较 起 来 还 不 
到 1/10, 

我 们 在 使 用 种 群 时 只 关心 种 群 中 的 个 体 的 作用 ,这 些 个 体 出 
现 次 数 在 某 种 程度 上 反映 了 它 的 性 能 ,而 这 些 个 体 如 何 排列 是 不 
起 作用 的 .因此 ,使 用 等 价 类 个 体 可 以 使 遗传 过 程 简单 化 。 

遗传 算法 的 基本 概念 构成 了 遗传 算法 的 基本 模型 ,对 于 一 个 
实际 问题 ,首先 是 将 问题 转化 为 遗传 算法 的 基本 概念 ,一 旦 用 遗传 
算法 的 基本 概念 来 表达 实际 问题 ,问题 的 求解 过 程 就 不 再 依赖 于 
实际 问题 本 身 。 

P r.1.4(Goldberg, Samtani) 10 杆 杭 架 负载 问题 。 

图 1.1.1 给 出 了 10 杆 痪 架 的 结 档 示 意图 .其 中 10 个 析 架 的 截 
面 面 积分 别 表示 为 A Ag. Aw oi TTR BAC AY it PE, 并 
且 它 必须 能 承受 图 中 所 示 的 两 个 负载 .每 个 杆 上 的 应 为 必须 在 -- 
个 允许 值 范围 内 ,这 个 范围 由 那个 杆 的 应 力 约束 来 表示 ,优化 的 日 
标 是 找到 这 个 负载 杭 架 的 每 个 杆 的 截面 面积 以 使 建造 它 的 材料 总 
重量 最 小 。 


图 1.1.1 40 FFT 


下 面 我 们 用 遗传 算法 的 基本 概念 来 表示 这 个 问题 ,首先 假定 
截面 面积 在 0.1 ~ 10 面积 单位 之 间 有 16 个 可 能 的 值 ,其 中 等 于 
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0.1 面积 单位 的 截面 面积 用 4 位 数 串 (0000) 表示 ,等 于 10 面积 单 
位 的 截面 面积 用 4 位 数 串 (1111) 表示 ,其它 的 具有 中 间 值 的 截面 
面积 用 余下 的 14 个 4 位 数 串 编码 , 即 (0001),(0010),(0011),…， 
(1110) Fo 10 PTR AL An 给 出 10 个 截面 面积 , 即 构 成 一 
个 个 栖 。 如 

X, = (0010111000010011101100111111001100111010) 
即 是 一 个 个 体 ,个 体 的 链 长 为 40, 于 是 个 体 空间 为 

S = 10,11* 
个 体 空间 中 有 2” — 10 个 个 体 。 

如 果 到 N = 200, 即 种 群 规 模 为 200, 则 种 群 空间 为 : 

sm = to, 1} 01200 
一 个 种 群 可 以 表示 为 

X = (Xis Xs, Xm) 
六 代表 着 200 x 40 RER ,矩阵 的 每 一 行 代表 一 个 个 体 ,第 7 行 
代表 第 i 个 个 体 。 如 果 第 i 个 个 体 表示 为 

X, = EFFES rs tao) 
Wa, 是 -一 个 基因 AE 1 sk 0. 4 FRAMERATE A, 
的 截面 积 , (xr. , xis taste) 表示 第 二 个 梅 架 的 截面 积 ,依次 类 
推 .每 4 个 基因 构 蕊 一 个 整体 , 它 的 变化 直接 表示 某 一 栓 守 截面 面 
积 的 变化 -每 个 术 杆 有 一 个 应 力 约束 ,如 果 违 犯 了 应 力 约束 , 则 这 
个 解 是 不 可 行 解 。 

Goldberg 和 Samtani 于 1986 年 在 第 九 届 电 子 计 算 机 国际 会 议 

上 所 发 表 的 论文 ,建立 了 以 上 问题 的 遗传 算法 模拟 ,通过 遗传 算法 
40 代 的 计算 得 到 了 to 杆 桥架 问题 的 可 行 设 计 , 且 其 材料 总 费用 不 
超过 理论 最 优 解 的 1% , 
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1-2 遗传 机 制 与 遗传 算法 


遗传 机 制 主要 包括 选择 ,杂交 和 变异 ,遗传 算法 是 对 种 群 通过 
遗传 机 制 模拟 自然 进化 过 程 而 不 断 产生 新 一 代 种 群 ,并 使 新 一 代 
种 群 有 更 好 的 性 质 。 

定义 1.2.1( 适 应 值 函 数 ) ”对 于 -- 个 个 体 产生 的 效益 称 为 适 
HG Th BRE TAS S 到 正 实数 空间 的 映射 , 即 适 应 值 
KA f A 

f:S — R: 

在 例 1.1.1 中 ,一 个 个 体 的 适应 值 即 是 一 个 经 营 决策 产生 的 
利润 .在 例 1.1.2 中 ,- 一 个 合体 的 适应 值 即 是 个 体 所 代表 的 实数 的 
函数 值 - 例 1.1.1 与 例 1.1.2 恰好 反映 两 大 类 问题 , 即 决 策 问 题 与 
优化 问题 。 

定义 1.2.2( 选 择 算 子 ) ”选择 算 子 即 是 在 一 个 种 群 中 选择 一 
++, E BUDE Si 


T,: S" — S 
特别 地 ,按照 概率 规则 
PIT(X)= X,! = Lixo (1.2.1) 
SFG) 


选 拌 个 体 的 方式 称 为 适应 REM 其 中 (XO 表示 种 群 关 中 
的 个 体 X, 的 适应 值 ,0 < a < oo 对 于 ae = 1 称 为 比例 选择 算 子 ， 
简 记 为 工 。 
容易 看 到 适应 值 选 择 算 子 (依赖 于 种 群 怠 , 它 是 种 群 总 上 的 
一 个 概率 分 布 ,部 对 于 种 群 
X = (X, ,X,,- Xp) 
有 概率 分 布 
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PIX} = £OX)/ SIF (x,) 
k=1 


即 构成 概率 分 布 向 量 
X; X; a Xy 
PIX! PÍX,! e.r P| Xy) 


其 中 PiX| 满足 以 下 条 件 : 
(D PIX; > 0 (; < N) 
(2) PIXI = 1 
称 PiX,1(i < N) 为 对 上 的 一 维 概率 分 布 。 
例 1.2.1( 续 例 1.1.3) 给 出 饭店 经 营 决 策 的 初始 种 群 与 适 
应 值 
X, = (011) fX) = 3 
X,=(001) f(X;) =1 
X, = (119) f(X,) = 6 
X,=(010) = f(X,) =2 
RFA tt IE TOT, , 则 得 到 


JX) _ 3 1 fX) _ 1 
‘ 1 4' < ~ 12 
> LX) 74 > f(X,) 
SX) 26 Ld AX) LL 
4 BB 2 OS 
LAX) DAX) 

于 是 得 到 初始 种 群 的 分 布 


X X X X, 

0.25 0.08 0.5 0.17 
按照 概率 规则 选择 个 体 X, 和 X, 易 保 留 -- 次 ,XX 可 能 被 淘汰 ,而 
X, 可 能 被 选择 两 次 ,这 样 选择 以 后 的 结果 可 能 为 六 = (X,,X,, 
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X,,X. >. 
按照 式 (1.2.1) 计算 即 得 到 新 的 概率 分 布 为 
X, X, X X, 
lO.18 0.35 0.35 0.12 
从 选择 算 子 的 执行 结果 可 以 看 到 ,适应 值 大 的 个 体 易 被 选择 ， 
适应 值 小 的 个 体 易 被 淘汰 ,这 样 经 过 不 断 地 选择 使 适应 值 太 的 个 
体 不 断 重复 出 现 ,使 一 个 种 群 可 能 变 为 齐 次 种 群 。 但 是 选择 算 子 只 
是 在 - -个 固定 的 种 群 中 进行 选择 ,选择 的 结果 不 可 能 跑 到 种 群 之 
外 。 对 于 种 群 之 外 更 好 的 个 体 是 不 可 能 被 选择 得 到 的 ,选择 的 结果 
依赖 于 初始 种 群 。 
定义 1.2.3( 母 体 和 母体 空间 ) ”所谓 母体 即 是 一 对 个 体 
(XOX EPX, € SG = 1,2)。 所 有 母体 的 全 体 称 为 母体 空 
DA 
S? = {(X,,X,); X, Xx, € S! 
定义 工 .2.4( 母 体 选择 算 子 ) “母体 选择 算 子 即 是 在 一 个 种 群 
中 选择 -一 个 母体 , 它 是 映射 : 
T,: S“ + 5 
特别 地 ,按照 适应 值 选择 算 子 独立 的 选择 两 个 个 体 而 构成 母体 的 
方式 为 适应 值 母体 选择 算 子 , 即 
P{X,,X,| = PIT(X) = (X,,X,)| 
_ LX) LX) 
FX) QF (x) 
容易 看 到 母体 选择 算 子 构成 种 群 乘积 空间 X OX 上 的 二 维 概率 
分 布 


(1.2.2) 


P= (X,,X,) SGN 
= PIX,,X} F J =a 


二 维 概率 分 布 呈 是 N x N BME, BATE 
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(1) PIX ,,X 1 >0, G7 < N) 
(2) SISDPIX XI = 1 
i-l 42l 
它 与 种 群 马上 的 概率 分 布 有 关系 ; 


(1) S PIXX I = PIX,i 
i=l 


(2) NJ PIX., X, | = PIX,! 


亦 即 一 维 概率 分 布 是 二 维 概率 分 布 的 边际 分 布 。 
例 1.2.2( 续 例 1.2.1) ” 考 虚 例 1.2.1 中 的 4 个 个 体 和 它 的 适 
应 值 ,于 是 得 到 


PIT(X) = (X/,X)| = 


1 I 
4*4 16 
PIT(X) = (X,,X,)1 = T+ x Ts = 2 


SAMS BCX, ,XI SO 的 二 维 概率 分 布 为 
1 1 1 1 
16 48 8 24 


1 1 1 1 
48 144 24 36 
l 1 l 1 
8 24 4 12 


1 1 1 1 
24 36 12 36 


定理 1.2.1 对 于 选择 算 子 T 及 种 群 
X = (X Xart, Xy) 
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(1) PIT (X) CX = 1, Te (X) C- X 
Dr) 
(3) PIT?(X) = (X,Y)! — LX WFD eX. YIA (Y) 
VEX) EFX) 
kel k=1 


(1.2.3) 
证 明 (1) 由 于 
PIT?(X) CX} = SPIT CX) = X, = 1 
则 证 (1)。 
(2) MEX € S, 由 全 概率 公式 
PIT(X)= Xx] 


N — 
= > P IT (X) = X/X = X, |PX = X;] 


= D PIT: (X) = Xb yin (X) 
_ eX, X) (X) 
DFX) 
i=l 
(3) 类 位 (2) 可 证 。 
推论 1.2.1 BX ~ YT X) 与 TY) 同 分 布 。 
证 明 FX 一 节 , 则 w( 基 ,X) = oY XM FIERX € 
S 成立, 据 定理 1.2.1 则 证 。 
推论 1.2.2 BX = (X, X; X) € BY WAP AAS , Wl 
PiT?(X) = X}=1 
PIT(X) = (X,X)} = 1 
证 明 ”由 于 g(X,X) = N, 且 
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Sry) = = NF (X) 


EEF L. 2. ‘1 ME. 
定理 1.2,2 (1) Ë X 5-— R, C 11,2,…,NE 使 得 


HK) = ARG € DEAK) > (KG € r,; & DM 
limP| TI(X) = (X,,X,)] = (J € 1) 


其 中 KK =111 为 了 中 元 素 个 数 ， 
(2) 任 给 种 群 X, CA 


limP | Te (X) = (X,,X,)| = = Gj < N) 


证 明 (1) 依 定理 假设 及 式 (1.2.2) 有 
bs PIT CX) = (X,,X,)| 


1 
K? 


SPX) Mer (X,) 
= ioff Fy] [ey] 


= lim | K + yr] [K K+ HS] 


1 

K? 

(2) 类 似 (1) 可 证 。 

由 定理 1.2.2 可 知 , 选 择 算 子 的 指数 a 对 于 选择 有 重要 作用 。 
a 越 大 ,适应 值 大 的 两 个 个 体 越 容易 被 选择 ;a 越 小 ,选择 的 随机 
性 越 大 ,适应 值 大 小 对 选择 不 起 作用 。a 很 大 时 搜索 空间 很 小 , 基 
本 上 是 在 一 个 种 群 中 适应 值 大 的 个 体 中 搜索 。 而 当 a 很 小 时 搜索 
字 间 很 大 , 它 在 种 群 的 全 体 中 搜索 ,选择 算 子 具有 “优胜 ”的 性 质 。 

EX 1.2.5( 杂 交 算 子 ) ”杂交 算 子 是 母体 空间 到 个 体 空间 的 
映射 , 记 作 
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T:S:—5 
(1) 单 点 杂交 算 于 ; 等 概率 的 随机 确定 -… 个 基因 位 置 作为 杂 
交点 ,于 把 -- 对 母体 两 个 个 体 从 杂交 点 分 成 前 后 两 个 部 分 ,交换 两 
个 个 体 的 后 半 部 分 得 到 两 个 新 个 体 ,到 第 一 个 个 体 为 杂交 结果 ， 
(2) 单 点 随机 杂交 算 子 : 等 概率 的 随机 确定 一 个 基因 位 置 作 
为 要 交点 ,再 把 一 对 母体 两 个 个 体 从 杂交 点 分 为 前 后 两 个 部 分 ,以 
概率 p. 交换 两 个 个 体 的 后 半 部 分 ,得 到 两 个 新 个 体 , 取 第 一 个 个 
体 为 杂交 结果 。 称 p 为 杂交 概率 。 
如 果 确 定 两 个 基因 位 置 将 一 对 母体 两 个 个 体 分 成 三 部 分 , 交 
换 中 间 部 分 , 称 为 双 点 杂交 算 子 。 同 样 有 双 点 人 杂交 与 双 点 随机 杂交 
之 分 。 
(3) 均 句 随机 杂交 算 子 ; 独立 地 以 概率 p 把 母体 的 第 一 个 个 
体 的 相应 的 分 量 交 挽 为 第 二 母体 的 相应 分 景 ,从 而 得 到 杂交 结果 。 
例 1.2.3( 续 例 1.2.1) HPS TTE 
X, = (110) X, = (011) 
假定 第 2 位 为 杂交 点 , 则 将 X, AX, 的 最 后 一 位 相互 交换 得 到 
X =(111 X, = (10) 
于 是 X, WX, 杂交 后 得 到 新 的 个 体 X, = (1 1 1)。 这 就 是 单 点 杂 
交 算 子 杂 交 的 结果 .如 果 户 = 0.5, 则 各 有 0.5 的 概率 使 杂交 结果 
为 (1 1 1), 或 保留 (1 10)。 
如 果 采 用 均匀 随机 妹 交 算 于 则 可 能 有 以 下 情形 : 
(110) (010) (111) (011) 
由 例 1.2.3 可 见 , 杂 交 算 子 的 结果 可 能 在 种 群 之 中 ,也 可 能 在 
种 群 之 外 ,这 一 点 是 与 选择 算 子 不 同 的 。 杂 交 算 子 扩大 了 搜索 空 
间 。 
定理 1.2.3 (1) Ë T 为 单 点 杂交 算 子 ,对 于 任意 (XI .X.) 
和 SEES, 则 


BIE 遗传 算法 的 刀 何 理论 27 


PIT,(X,,X.) = Yi = + (t,2.4) 


FUP = k(X,.X,,Y) HB 283 (X,,X,) 可 以 生成 Y 的 基 
因 位 置 的 个 数 。 

(2) 设 工 .为 单 点 随机 杂交 算 子 ,p, 为 杂交 概率 ,对 于 任意 
(XX) ES:,Y € SM 


k Y = X, 
P|IT (X, ,.X.) = Yi = 


|a-po+ “By =X, 


(1.2.5) 
(3) RT, 为 均匀 随机 杂交 算 子 ,对 于 任意 (Xi,X,) € S, 
Ye S, X; = (rast say) = 1,2),¥ = (yi h A 


PIT (X ,.X,) = Y! = Ha — b) ly, Br) 


+ p. ` (y, Dr)] (1.2.6) 
HPD 为 异 或 算 子 , 即 对 于 任意 cy € 01 有 
. 1, += y 
«Dy = 0, +£ = y 
证 了 明 (1) 由 于 杂交 点 有 i 种 选择 0,1,2,…,/ - 1, 每 一 种 杂 
变 点 的 选择 通过 单 点 杂交 后 可 能 是 Y ,也 可 能 不 是 了 表示 了 选 
择 的 杂交 点 通过 杂交 后 生成 Y 的 个 数 ,而 杂交 点 的 选择 是 均匀 分 
布 的 , 则 证 (1)。 
(2) 单 点 随机 杂交 算 子 分 为 两 种 情形 考虑 ,在 Y = X, 时 . 取 
决 于 杂交 (XX| XX.) 可 以 生成 了 的 基因 位 置 的 个 数 上 ,与 (1) 不 同 
的 是 即使 选择 的 杂交 点 杂交 后 姜 以 生成 Y, MERDA, AT 
的 概率 为 p.。 于 是 Y = X, 时 
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PIT. (X X.) = Y! = Ép. 


5 Y = X WY, xX, 55 X, 在 任何 杂 变 点 都 不 杂交 即 为 了 = XX| ,这 
RAO- p) X, 55 X, 在 任何 杂交 点 以 p, 概率 杂交 ,这 时 概 


pA P ,根据 概率 加 法 公式 有 


PIT.(X,,X,) = Y] = (1 - b.) + p. ° £ 


则 证 (2)。 
(3) 设 T, 为 均匀 随机 杂交 算 于 , 记 : 
X, = (Cryst ty) 
X; = (astas ty) 
FB YAR TRE, x, 与 y 相同 ,这 时 不 杂交 ;而 当 z, Sy, 
相同 时 ,这 时 杂交 。 于 是 利用 全 概率 公式 
PIT. (XI. X. ); = yi 
= PIT.(X,.X,), = y, 7%, = x1, Phy; = Xs; | 
+PIT. (X,,X,), = yy, = ry |P ly, = xy! 
=(1~-p)+(y (xu) + p ' (y Dry) 
由 于 均匀 随机 杂交 算 子 各 分 量 杂 交 是 独立 实现 的 , 则 证 (3)。 
推论 1.2.3 设 工 .为 杂交 算 子 ( 单 点 杂交 , 单 点 随机 杂交 、 均 
匀 随 机 杂交 ), 对 于 任何 母体 (X, 久 ), 必 有 
PIT(X,X) = X] =1 
Bg 
T.(X,X) = X 
证 肯 H T. ABET (X,X,X) = 1, 1.2.3 
的 (1) 5 (2) 则 证 .当代 ASR SLE BF, H OM ER p< 
有 
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x,@x, =1 
依 定理 1.2.3(3) 则 证 。 
EM 1.2.4 RT 为 单 点 随机 杂交 算 子 或 均匀 随机 杂交 算 . 
子 ,对 王 任 给 种 群 总 = (X, ,Xi,… Xy) IE LN, DA 
PIT.(T'(X)) = X,4 >0 (1.2.7) 
证 明 ”首先 
PITA(T(X)) =X} 
> P|T.(X,,X,) = Kl- PITS(X) = (XX) 
RAH | 
PITO = (Xp X) = (L2 
DIY) 
i PI IT (X, X) = X ] = LANE, 
推论 1.2.4 WT AZAT, T 为 选择 算 子 ,总 = 
(Xj X) 为 齐 次 种 群 , 则 
PIT(T(X)) = X] =1 
证 明 ”由 于 
PIT (T'(X)) = X| 
= PIT'(X) = (X.X)IPIT (X,X) = x| 
利用 推论 1.2.2 和 推论 1.2.3 则 证 。 
定义 1.2.6( 变 异 算 子 ) ”变异 算 子 是 个 体 空间 到 个 体 空 间 的 
随机 映射 T. :S — S, 其 作用 方式 为 独立 地 以 概率 p, 改变 个 体 分 
Mop, 称 作 变异 概率 。 
定理 1,2.5 HEB TTEA X. Y € S, 有 
PIT (OX) = Yl = pM = P U (1.2.8) 
其 中 aX‘, Y 表示 X SY 之 间 的 Hamming HA, BD 


t 
dí X,Y) = > | xr; 一 yi l 
1 = 上 


) >o 
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其 中 
X = Ẹri) 
Y = (yy oat eM) 

证 明 将 了 的 分 量 分 为 两 种 ,-- 种 是 vy 2: zx; ,一 种 是 y = 
oR y 关注, 的 个 数 为 4d(X,Y), 这 时 每 个 x, 变异 yy ORBEA 
Paor = >, BJ P RAL -d X, Y), BT r, 不 变异 ,而 不 变异 的 概 
EKU 一 p,,)。 由 于 各 个 基因 的 变异 是 相互 独立 的 , 则 证 (1.2.8) 
成 立 . 

基于 生物 掌上 的 考虑 ,一般 认为 杂交 是 自然 演化 的 主要 机 制 ， 
变异 为 自然 演化 的 背景 ,它们 分 别 承 担 遗 传 与 变异 两 种 功能 。 因 此 
在 具体 应 用 过 程 中 ,杂交 概率 一 般 取 值 较 大 ,在 0.65 与 0.9 之 间 。 
而 变异 概率 取 值 较 小 ,一 般 在 0.001 与 0.01 之 间 。 

定理 1.2.6 RT 为 选择 算 子 ,了 为 杂交 算 于 ,TT 为 变异 
算 子 , 则 对 于 任意 革 € S*,Y € 5S, 使 

PIT, ° T. ° TX) = Y} >0 
的 充 要 条 件 为 pn 满足 0 < p, < 1o 其 中 
Tae To TX) = 7,07. 07 (X))) 

证 明 ”充分 性 :” 当 0 之 p, <1, AEW 1.2.5 FE 
BX,Y € S#€PIT,(X) = Yi > 0. BK MEER X c S", 
Y € S, 根 据 定 理 1.2.4 有 

PIT, e T, T(X) = Y| 
= DPIT, O) = Yl. PIT,- (XX) = X}>0 
必要 性 ; Bit pn = OR X = (Xo,…,Xo) 为 齐 次 种 群 ， 
Y € S,Y Z X,.-H + 
PIT ° TUX) = Xol = 1 
PIT, (X) = YI = 0 
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于 是 册 全 慨 率 公式 有 | 
iT, ° Toe POX) = Yi 
= 2PIT,(X) = Y! “PIT TX) = X! 
= PIT,(X,) = Yi PIT. + TCX) = Xf = 0 
IPIT, e T. s T(X) = Y 1 > 0 RETE, k p, > 0。 同 理 可 证 
Py» < l. 
定义 1.2.7( 删 除 算 子 ) ”删除 算 子 是 从 一 个 种 群 删除 掉 -^ 
个 体 , 它 是 SN 到 SY! 的 随机 映射 , 即 
Ta: S" — SY 
是 指数 为 0 雪 a =< co 的 随机 删除 算 子 ,由 下 面 的 概率 分 布 确 定 : 
LK) 
` r° (X,) 
特别 地 , 称 a = 1 的 删除 算 子 TI 为 比例 删除 算 子 ; 称 = 0 的 删 
除 算 子 为 均匀 删除 算 子 。 
定理 1.2.7 (1) 设 革 为 一 个 种 群 , 且 对 于 某 个 i < N ,存在 
j Z N, EX,’ > FOX) 
limP|x, € T;(X)I = 
(2) 对 于 任意 种 群 X = (XX), X.) DA 


PITs(X) = X\ IX, = (1.2.9) 


limP |x, & THO! =$ 
证 明 (1) 由 于 FOX ) > /(X,). M 
limP | x, € T3(X)! 


= 1- limP 1 T2 (X) = XIXH 


II 

l 

B 
eB 
4+ 
>> 
>x x 
— 
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则 证 (ti 
(2) 对 于 x = (X, Xs hA 
limP| X, & TIXO! 


= mP ITO = XA IXI} = lim FP = 
DPX) 
随机 删除 算 子 中 ,对 于 a 的 选择 很 重要 。a 越 大 时 适应 值 大 的 
个 体 越 容 易 被 保留 a 越 小 时 删除 算 子 越 具 有 随机 性 ,与 适应 值 大 
小 的 关系 越 不 重要 .删除 算 子 体现 了 “ 沙 沐 ”的 性 质 。 
有 了 以 上 概念 ,我 们 可 以 介绍 几 种 常见 的 遗传 算法 。 
标准 遗传 算法 (canonical genetic algorithm): 
(1) Be = 0, 随 机 产生 初始 种 群 
X(0) = (X,(0),:-: , X. (0)) € SN 
(2) 独立 地 从 当前 种 群 中 选取 N 对 母体 ; 
(3) 独立 地 对 于 N 个 母体 进行 杂交 得 到 NN 个 中 间 个 体 ; 
(4) 独立 地 对 N 个 杂交 后 的 个 体 进行 变异 ,得 到 下 代 种 群 
Xk+) = (Xk +t) Xk + ES 
(5) 检验 停止 准则 ,车 满足 则 停止 ,否则 名 = + 1 并 返回 到 
(2). 
杰出 选择 遗传 算法 (elitist selection genetic algorithm) 
(1) # £ = 0, 随 机 产生 初始 种 群 
X(0) = (X,(0),---,X.(0)) € S" 
(2) 独立 地 从 当前 种 群 中 选取 N 一 1 个 母体 ; 
(3) 独立 地 对 所 选 N - 工 个 母体 进行 杂交 得 到 N 一 1 个 中 间 
+Ë; f 
(4) 独立 地 对 杂交 后 的 NN — PPT ERE + 1 TÚ FP 


群 的 前 N - 1 个 个 体 
X (Ë + 1), Xu Ck + 1) 
(5) HR i = arg maxi f(X, (k), S 
Xuk + 1) = X, 
(6) 检验 停止 准则 。 若 满足 则 停止 N £ = £ + 1 URC) 
ER b AEA Ae MYA P, = arg maxi (X, (k))1 表示 使 
SCX, (2)) BUR AMA TR X, (k). 
稳定 状态 遗传 算法 (steady state genetic algorithm) 
(1) Bk = 0, 随 机 产生 初始 种 群 
X(0) = (X10) ,7 XO € S" 
(2) 从 当前 种 群 中 选择 一 个 母体 ; 
(3) 对 所 选 母 体 进行 杂交 和 变异 得 到 一 个 新 个 体 ; 
(4) MI Xk) 中 的 一 个 个 体 而 代 之 以 产生 的 新 个 体形 成 下 
代 种 群 
X(k+1)= (Xk +1) X. (h EDIE S" 
(5) BREN, SAM Mk 二 + 1 并 返回 
(2). 
以 上 是 几 种 常见 的 遗传 算法 ,变化 选择 、 杂 交 .变异 .删除 的 方 
式 , 还 可 以 得 到 不 同 的 遗传 算法 。 遗 传 算 法 通过 遗传 机 制 的 “优胜 ” 
BR SUK” ,保留 好 的 性 质 , 淘 法 差 的 性 质 ,使 遗传 过 程 不 断 进化 。 


1-3 遗传 机 制 的 几何 表示 


对 于 一 个 链 长 为 /的 个 体 全 体 , 即 个 体 空 间 
S = 10,11! 
可 以 视 为 1 维 立方 体 中 的 顶点 集 . 例 如 1 = 3 时 为 3 维 立方 体 。 
在 3 维 立 方 栖 中 的 一 个 顶点 构成 一 个 个 体 , 对 于 3 维 立方 体 ， 
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只 有 12 条 直线 ,每 个 直线 上 有 两 个 顶点 ,两 个 顶点 仅 在 一 个 基因 
位 置 上 到 值 不 同 , 如 {0 10) 和 (1 10) 在 一 条 直线 上 ,可 以 表示 这 
条 直线 为 (* 1 人 0), 即 第 一 个 基因 位 置 可 取 人 0 或 1, 而 后 两 个 基因 位 
BR ASE HCO 10) 和 {0 1 1) 也 在 -- 条 直线 上 ,可 以 表示 这 
条 直线 为 (0 1 * ), 即 第 三 个 基因 位 置 可 取 0 或 1, 而 前 两 个 基因 位 
置 保持 不 变 。 对 于 3 维 立 方 体 有 只 有 6 个 平面 ,每 个 平 曾 上 有 4 个 玻 
点 :4 个 顶点 在 两 个 基因 位 置 上 取 值 不 同 。 如 (0 1 0), 110, 
(1 1 1),t0 1 1) 在 一 个 平面 上 ,第 二 个 林 因 位 置 保 持 不 变 ,其 它 两 
个 基因 位 置 可 取 0 或 1, 在 3 维 立 方 体 中 ,直线 和 平面 都 称 为 3 维 立 
FEAT EOF” ,它们 是 3 维 立 方 休 的“ 子 空间 ”。“ 超 平面 "保留 茶 
些 基因 位 置 不 变化 , 减 小 搜索 范围 ,我 们 一 旦 确定 某 些 基因 位 置 取 
值 是 有 效 的 , 则 可 以 固定 这 些 基因 位 置 取 值 ,使 搜索 范围 减 小 ,而 
降低 计算 工作 量 。 


图 1.3.1 ¿= 3 的 个 体 空间 


Holiand 在 1975 年 引入 模 式 (Schema) 的 概念 ,在 遗传 算法 的 
理论 分 析 中 有 着 重要 意义 。 
定义 1.3,1 Ra, € iO, Si < ¿a Sl, TARE 
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个 体 空间 中 的 “ 超 平 面 ", 记 作 
#= (ia, OSSR] 
= |X = (rg) € S; r, = a, SK) 
H h K ERFIR BPE OCD) = Koliji | PF SE Mt 
量 ( 或 定义 基因 位 置 ),a， 称 作 定义 分 量 值 {定义 等 位 基因 ), 模 式 
SLO = ik — ñ, 
FEARS AMAR PRA Ca, hk SK] 简 记 
fe s mk [Gi a, yi K]. 
例 1.3.1( 续 例 1.2.1) Ba, = 1, 则 
ALL] = 11003. 019,010), 11} 
Bea, = l,a, = 0,3 
7(04,1),02,0)] = [01 00), 0101) 
在 例 1.2.1 中 X, M X, 在 一 个 * 超 平面 ”上 , 即 
#((1,0),(2,1)] = i0 1 1),0010)} 
X, WX, 在 一 个 * 超 平面 ”上 , 即 
¥1(2,1),03,0)] = 1(010),(1 10)! 
但 是 X. ,X,,X,, X, 不 在 任何 一 个 “ 超 平面 "上 ,在 上 面 的 例子 中 ， 
Ol) = OCA) = O(s) = 2,O(23,) = 1, Wi (9) = 0, 
6(%,) = 1.06(2,) = 1.603.) = 1. 
下 面 我 们 用 模糊 度 描述 模式 的 阶 。 
定义 1.3.2 FON H:(0.1] 一 [0,11 HEME SAE: 
(1) Hla) = 0 当 且 仅 当 a = 0,1,H(1⁄2) = 1⁄2; 
(2) Hla) = H(1 - a); 
(3) Hla) #E[0,1 22] 上 单调 增 。 
11.3.2 下 列 映射 是 模糊 度 。 
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H (a) = 2a(l — a) 
Hla) =- aloga 
Hila) = N a =< 1⁄2 
—a, a > 1⁄2 
定义 1.3.3 BX = (Xi,…,Xw) 为 种 群 ,X = (ma, 
ay) < N), H 为 模糊 度 , 称 


+ 1 Ny 
d. = 二 p 
_ (X) H( ye) 
OX 在 分 量 ; 处 的 多 样 度 , 称 
A(X) = 45a, (2) 
9 X 的 种 群 多 样 度 。 记 
a(X) = Do xo (4, (X)) 
X 的 成 熟 度 为 
B(X) = í — A(X) 
1.3.3 BS = 10,1}, BR X = (X i, X;,,X,,X.,), H 
X, = (110) X, = (010) 
A Hla) = 2a(1 -a), 则 ; 


d (X) = H(4)= š 
daž) = H(3#)= ž 
d,(X) = H(4)= 4 
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定理 1.3.1 WX Ay = AX) RAS X 的 最 小 模 
RWO = A(X) = ¿- BCX). 
证 明 ”由 于 4 (X) =- 0, 5 B f2 4 2, = 0(G < N) 或 
r, =1G ON), PR j 个 基因 位 置 相同 -4(X) 是 必 (X) = 0 的 
PR, FE ACK) = OCD. 
1.3.2 RX MY AAP HRA X ~ Yi 
d(X)=d4(¥) GS) 


证 明 由 于 
1 < l 
= =< xX 
Ni > No? lr, 
1 3 = 1S o( ¥,X)x 
N; = 上 ? Ns , 
Ht X = T x) ES 为 个 位, 根据 假设 部, 则 对 于 任意 


XES Bp.X) = = pl Y, X), TE 
d,(X) = H(z ] = H(X D») d,(¥) 
如 果 4(X) = a,(Y) G < 1), f X SY BS tr, 记 为 


x Cae} -= 


X “CY w ” FS RET AS ,也 可 以 将 S" 进行 等 价 分 类 ,由 


定理 1.3.2, 若 区 — Y J X 芝 台 ,反之 则 不 然 。 例 如 
X=|(011D0011)(0100(0011)] 


Y= |(1011}X1011)(0101)0010) 
Ad(X)=4(Y) G<4) BE X — Y Raw HILAR eS 


价 关系 “<” 将 SY 分 类 比 "~" RE. 

模糊 度 是 对 基因 作用 的 进一步 刻画 。 若 在 一 个 种 群 的 某 个 基 
因 位 置 上 模糊 度 为 0, 该 基因 位 置 在 杂交 中 不 起 作用 ,因此 减 小 了 
杂交 的 搜索 空间 .模糊 度 为 0, 即 是 种 群 中 的 基因 为 不 变 基 因 ; 否 
则 为 可 变 基 因 。 
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为 方便 起 见 , 我 们 可 将 模式 > 表示 为 一 个 可 变 向 量 ,在 固定 i 

MR FI u (k SK). ERIN EOLA YS x 表示 ,如 
A = (1, *, *) z = (1,0, *) 

因此 SAE OL), 上 中 取 值 。 于 是 对 于 长 度 | 
的 个 体 产 寺 了 了 3! 个 模式 。 

例 1.3.4( 续 例 1.2.3) BFÆZ X = (1 10) 和 (0110) 的 
结果 为 X; = (1 1 1), /(X,) = 7, 于 是 杂交 结果 提高 了 适应 值 。 我 
们 比较 以 下 的 结果 : 

X =(011)  £(X,) =3 
X: = (001) F(X, =1 
X, = (10) f(X,) = 6 
X,= (010) FOX) =2 
X,= (111) A(X)=7 
最 然 第 一 个 基因 位 置 的 取 值 对 于 选择 好 的 适应 值 是 重要 的 ， 
ALLOA SILOU. D H 5 分 为 两 部 分 ,在 LOD] 中 可 以 搜 
索 到 适应 值 大 的 个 体 。 
EX 123.4 ”对 于 第 i 个 基因 , 若 
FEE yt Ti ,ri )) 
BS f((r, ti Ota) (1.3.1) 
对 于 任意 x, = 0,1(£ = i) 成立, 或 
FCC xr ria Oe tier ttt) 
Fr ty be rey x )) (1.3.2) 
对 于 任意 z, = 01k 关门 成 立 , 称 基因 ;i 是 重要 基因 , At 
(1.3.1) 成 立时 ,重要 基因 取 值 1 时 为 优良 选择 ; 当 式 (1.3.2) 成 
立时 ,重要 基因 取 值 如 时 为 优良 选择 .车 基因 ; 是 重要 基因 ,1 是 优 
良 选择 , 则 最 优 解 必 在 模式 Af(i,1)] 中 。 当 如 是 优良 选择 时 ,最 优 
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解 必 存 模式 2[ (i,0)] 中 。 
如 果 存 在 一 个 重要 基因 ,搜索 空间 就 减 小 了 -- 半 , 即 只 要 搜索 
2 ! 个 个 体 。 一 般 地 , 若 有 点 个 重要 基因 . 则 搜索 空间 仅 有 21* 个 
+T. 
FEM 1.3.5 Hy EMER, X € SY 是 一 个 种 群 。 
(1) fk X WEF ye POX Cv. BM PER < N X € 
2 其 中 X = (X... X.) 
(2) # X 5; yZ ete X Nro, ETEN, tE 
X, © 4; 
(3) [X] 为 包含 X 最 小 模式 ,车 对 于 任意 包含 XHEK 
4, wA UX] Cy, 
定理 1.3.3 (1) 设 了 为 一 个 模式 , 则 121= 2, 
(2) Fu [Cy a, KIR ,[( ,6 ):K,] 为 两 个 模式 , 且 
满足 条 件 ， 
a, =b (i, = ded 
则 
F= [sa KINA AG b, K] 
也 是 一 个 模式 ; 
(3) EA X e SAX) 必 存 在 且 唯 一 。 
证 明 (1) 由 于 O(Y) = K 表示 模式 的 阶 , 即 在 个 体 中 基因 
位 置 歌 值 不 变 的 数量 ,于 是 基因 位 置 变化 的 数量 为 ! - OC), 
证 。 
(2) He I = ligsk = Ky} U lik =< kK, 则 
= Y [ig sag) G5 = hRS Ki); 
(ae On) ,Ca = hik =< K) 
于 是 YAR. 
(3) 假设 X 中 各 个 个 体 在 每 一 个 分 量 上 的 取 值 均 不 相同 ,此 
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时 对 于 每 个 阶 OC) 大 于 零 的 模式 7, 必 有 总 区 4 因此 ,包含 六 
的 唯一 的 模式 为 SIX] = 5S, 假设 关中 的 个 体 仅 在 分 量 j, (K < !) 
上 有 相同 的 值 , 即 
z =a, (RSK, iN) 
此 时 [X] = wie). KFR E, H MY HES X 8985 
式 全 体 之 交 。 
例 1.3.5 MES = 10,14 
4, = (2,1), H = 3[(1,1)] 
vy = 3[(2,1).(3,0)] 
Miv t=l41=2's=4,14,1=27°=2,8 
sA = 2,.1),(2,0) = 1411), 10)} 
4S = z, = |010), (110) 

由 鲍 1.3.5 OMY 与 区 公有 三 种 情形 ,国门 号 = 好; 
HOARACHSY [) Z Z @ H AEA, A Z 3 WRA 
模式 确定 了 两 个 重要 基因 , 则 它们 的 交 运 算 产生 的 模式 即 是 由 两 
个 重要 基因 产生 的 模式 ,搜索 空间 跟着 缩小 。 

对 于 例 1.2.3 中 的 初始 种 群 X = 〔(X ,XXX ): 

X, = (0 11) X, = (001) 
X, = (110) X, = (010) 
不 在 一 个 平面 上 ,因此 AX] = S = 10,110, 
定理 1.3.4 RT, 为 选择 算 了 于 , 工 为 杂交 算 子 ,而 
vs Alira) K] 
MP BER XC AWA 
PIT.» THX) CH = 1 


即 
T. T'(X)C s 
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特别 地 有 
T.e TX CE O[X) 
其 中 JX] 为 由 半生 成 的 最 小 模式 。 
HERA HFE, YT, Z EY MOXY) 杂交 后 生成 
Z 的 基 内 位置 个 数 & = (X,Y,Z) = 0, 由 定理 1.2.3 有 
PIT (X,Y)= Zl = Ü 
由 概率 性 质 及 全 概率 公式 有 
PIT(T(X)) Cyl 


=1- S)PIT.(T(X)) = Z| 
Z& 


=1- >) 3 PIT(X,Y)= Z| 


Z&Y (X, YCY 
+ PIT(X)) = (X, Y)! 
= 1 
则 证 。 
定理 1.2.1 和 定理 1.3.4 表明 ,任何 种 群 区 ,选择 在 X 中 进 
行 ,而 杂交 在 AX) 中 进行 ,杂交 比 选择 扩大 了 搜索 范围 .选择 只 
在 种 群 的 NN 个 个 体 中 进行 ,而 杂交 后 产生 的 个 体 是 21* 个 个 体 中 
之 一 ,其 中 开 = AX] 
例 1.3.6 XPT S = f0,13 ,研究 初始 种 群 
X = (X,.X,,X;) 
其 中 
X, = (011) X, = (110) X, = (0 10) 
显然 
AX) = A2,0) 
= {(010),0011),0110),C211)} 
X, 与 X, 在 杂交 点 2 处 杂交 得 到 : 
X, = (0 10) = X; X; = (111) 
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X, 与 X; 在 杂交 点 上 处 杂交 得 到 : 
X, = (010) = X, X, = (111) 
不 管 怎 样 杂交 ,第 二 个 基因 位 置 总 是 1, 于 是 杂交 结果 在 AXP, 
同时 也 看 至 ,选择 只 能 取 X, , X, AX, ,而 杂交 产生 (11 1) 不 在 种 
群 中 ,可 见 杂 交 较 选择 有 更 大 的 个 体 搜索 范围 。 
我 们 用 WX] 表示 包含 X 的 最 小 种 群 。 记 
C(X,0) = X 
C(X,k) = T. ° T,(C(X,k — 1)) 
= (Y; FE Y, Y, € C(X.k - 1) 
tE T. (Y, Y.) = Yl (& > 1) 
WX) = ÜC(X.#) 
21.3.5 设 头 为 一 种 群 , 则 
AX] = AX) 
证 明 FX CHXI, TE C(X,0) = XCAXIF 
C(X,k -1) C AX), HEF 1.3.2 知 
C(X,k) =T,- T(C(X,k- 1)) CAX] 
FE EADIE ANG SER k > 0 8 
C(X,k) C AX] 
从 而 
x X]C HX) 

WEY € AX) WAX, 使, =y GLI, FERSAH 
杂交 算 子 反复 进行 即 得 Y。 同 样 用 单 点 杂交 算 子 反复 进行 也 可 得 
York 

X] AX) 
则 证 。 

南 定理 1.3.5 可 知 , 若 基 门生 = @ WJ Pi T. TCH = 0, 

但 是 有 下 面 定理 。 


BIR eR Lowe 43 


HEH 1.3.6 É T: 为 选择 算 于 ,TT 为 杂交 算 子 ,< 为 模式 ， 
X r) z >= @ , WJ 
PIT. P(X) Cat > 0 
IEE FX) u> OMB X. € 4, 由 定理 1.2.4 
PIT.» T(X) = X| > 0 
于 是 
PIT TUX) CA > 0 
对 于 变异 算 子 , 根 据 定理 1.2.5 有 
PIT, (X) = Y) = ADC] — p,, ya x.) 
— AOR p, RAR FE AX, Y) EI, PIT, X) = Y| Hü 
大 ,从 而 变异 算 子 使 个 体 在 它 的 邻 域 变化 。 
根据 模式 的 几何 表示 可 以 看 到 ,选择 是 在 种 群 中 进行 ,选择 的 
结果 仍 在 种 群 中 ;杂交 是 在 包含 种 故 蕊 的 最 小 模式 YN) 中 进行 ， 
杂交 的 结果 仍 在 of X 1 中 ;变异 是 在 个 体 邻 域 进 行 ,变异 的 结果 在 
PRX A) SBIR. AOR TR BRE XTX) 的 阶 数 兵 很 大 , 则 选择 . 杂 
交 的 结果 范围 很 小 , 仅 用 选择 和 杂交 不 可 能 越过 zf 六]。 变 异 虽 然 
在 一 个 个 体 的 邻 域 进行 , 它 可 能 越过 xy[ 半 1], 因此 ,选择 和 杂交 仅 
在 一 个 “ 子 室 间 ” 中 搜索 ,而 变异 在 不 断 地 改变 子 空间 ,从 而 扩大 
搜索 范围 ,原则 上 可 以 扩大 到 整个 子 空间 。 选 择 ,杂交 和 变异 三 者 
结合 构成 遗传 机 制 。 
关于 模式 与 遗传 机 制 的 关系 ,Holland 曾经 给 出 了 模式 定理 : 
具有 短 的 定 尽 长度、 低 阶 .并且 模 式 采 样 的 平均 适应 值 在 种 群 平 均 
适应 值 以 上 的 模式 ,在 遗传 算法 选 代 过 程 中 将 按 指数 增长 率 被 采 
样 。 
我 们 用 & 表 示 固 定 模式 ,O(2) 表示 模式 的 阶 ,8{.x) 表示 模式 
SRE SRE LN Cn) | 表示 遗传 算法 序列 ,p. 是 杂交 概率 ,p 为 
变异 概率 f. ERX) WM, BREN XG) 
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的 平均 适应 值 ,用 NGN X(n)) ERAN X(n) 中 的 个 体 数目 ， 
wn) = ENCE X(n))) BR SALSA X(n) 的 个 体 
数目 的 期 望 值 , 则 有 

m( 2. n +1) 


Z amv, n) £00 . [1 - p ED _ O() pn | 


由 I ARRERA < 中 , 则 在 遗传 算法 
过 程 中 ,种 群 将 有 更 多 的 个 体 包含 在 模式 世 中 ,这 是 遗传 机 制 的 吸 
收 性 , 另 -- 方 面 变异 与 杂交 不 断 地 破坏 这 种 吸收 性 ,使 种 人 群 转移 到 
新 的 模式 。 


1-4 杂交 算 子 的 几何 性 质 


选择 算 子 在 种 群 中 变化 , 厅 交 算 子 在 包含 种 群 的 最 小 模式 中 
变化 ,变异 算 子 在 个 体 的 邻 域 变化 。 我 们 现在 进一步 讨论 杂交 算 子 
的 几何 性 质 , 即 杂交 算 子 在 摸 式 中 的 变化 形式 。 

定义 1.4.1 设 S 为 个 体 空 间 ,U = S 为 指标 集 , 对 于 任意 
u € U, het: 

e: SS pss 

h: S2 — S 
若 满足 条 件 : 对 于 任意 X,Y,ZES 及 zx CUA 

hip X) p Y) = ZO gp X) = piZ), pY) = 
¢.(Z) - (1.4.1) 
称 

C.(X,Y) = h(e@e,(X),@,(Y)) 

CAX,Y) = h(g,( Y),e@,(X)) (1.4.2) 
为 母体 (X,Y) € S 的 杂交 后 代 , 记 为 
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T.(X,Y)= (C, 0X, Y),.C,(%,Y)) 
41.4.1 iS = 10,1| 为 个 体 空间 ,对 于 和 .Y € s, 
X = (Zita gX) l 


Y= (yi Pytty) 


id 
XBY = (r ysa: D y; t Bw) 
X @ Y = (x, Overs E) ty CO yy) 
X= 0a lr Br) =1Ps 
其 中 
1, x, = y, 
z, Dy -1 zy 
0, =; 一 X, 
_ 1, x, = y; = 1 
z @ y, = 16. 否则 


$ U= 5S, 对 于 x ES, 记 : 
e. (X) = G X, p(X}= (I) X 
h(X,Y)= XY 
其 中 1 = (1,1,…,1) ES 表示 各 分 量 恒 为 1 的 向 量 。 由 于 
u UB u)=0 = (0,0,.-,0E S 
We SO Pu) 是 正 交 的 ,于 是 由 
(G Z) (u @ Z) = Z = p(X @ g, (Y) 
即 得 
e, (Z) Bo, (Z) = p(X Dp) 
则 
pX) = e (Z) @.(Y) = e@. (Z) 
即 式 (1.4.1) Bese . AE 
C,(X,Y) = (u @ X) D (u @ Y) 
CX, Y) = (4 @ YI Blu @ X) 
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为 两 个 个 体 X BY 的 后 代 。 

从 例 1.4.1 可 以 进一步 分 析 杂 交 运 算 的 几何 意义 。S = 10,1 
可 以 视 为 | 维 空间 ,ww 与 x = 1u 为 5 中 的 两 个 正 交 向 量 ow Sa 
构成 了 S PHRF Rog, (XX) 为 XX 在 ww LARED, p, CY) A 
Y fE u 的 投影 向 量 ,C, (X,Y) 即 是 e (X) Soy) 之 和 ， 
C. (X.Y) È e, (Y) Sie, (XX) 之 和 和。 

u 是 一 个 杂交 向 时 ,在 例 1.4.1 中, 当 w，= 1 时 保留 X 中 的 
a u, = ORK Y 中 的 y 而 得 到 后 代 C,(X,Y), 同 理 , 当 
u; = RRE Y dË y "4 <, = OL REX PH 而 得 到 
CX, Y) 4a, = vy 时 , 子 代 忆 (X,Y) 与 CC (X,Y) 中 的 第 ;个 
基因 通过 u 杂交 不 会 变化 。 于 是 C,(X,,Y,) € XI, 
C.(X,, Y.) € 4[ 关 ]。 图 1.4.1 指出 , 当 固定 时 ,C, (X,Y) 与 
C, {X,Y) BX SY 的 平移 ,车 u 变化 ,而 (X,Y) 不 变化 , 则 
C.(X,Y)5S5 CX, Y) EX 5Y 的 旋转 。 


#. (Y) Pa (X) 
图 1.4.1 杂交 运算 的 几何 表示 


定理 1.4.1 对 于 任意 (X,Y)eE Su E UU 以 下 性 质 成 立 : 
(1) C.(X,X) = C.(X,X) = X 
(2) COC, OX, Y),C, (X,Y) = X 
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C (C (X.Y),C (X,Y)) = Y 
(3) TTX, YD = (X,Y),T =T, 
(4) 对 于 任意 M C S:, 有 
T.C M UJ T. (M)) = M Ú T. (M) 
(5) = (M) = M U T. (M) 具有 以 下 性 质 ， 
M C r, (M) 
M C M =r,(M) Tr (M ) 
r. (r. CM) = =. (MI) 
证 明 《1) 由 于 og, CX) = p(X) pX) = @,(X), BK 
(1.4.1) MIE AC ge, (X) ,g@,(X)) = X. 


(2) & 
Z=C.,(X,Y), W= C. (X. Y) 
由 式 (1.4.1) 知 


PA(2) = e (X) @.(Z) = @,(Y) 
PLW) = p (Y) pW) = p(X) 
由 (1) 证 
X = hlp lX) PXH = hlp, (2), pa (W)) 
= C,(Z,W) = C,(C.,(X,Y),C (X, Y)) 
类 似 可 证 
Y = C,(C, (X,Y),C, (X,Y)) 
(3) 由 (2) 即 得 。 
(4) BX, YEM, MT, (X, YET, (M), T. (T. (X, 
Y) = (X, Y) € M ,于 是 
T.(M U T,(M)) C M U T, (M) 
车 (X,Y) € M, M T. (T.(X,Y)) = (X,Y), MJ(X,Y) € 
T.(T.(M)), +E 
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M U T (MCT (M U T.(M)) 
则 证 ， 
(5) 由 (4) Wik. 
定理 1.4.2 设 X,YE Sw € ULI: || 3 S Ff 
Hamming W 3, C. (X,Y) = p(X) Ð @,(Y),C,(X,Y) = 
ge, (Y) Be (CX) MA 
(I) X Y = CX,YIGC (X,Y) 
(2)  l|XG Yi = IXY OCX, Y) 
其 中 O SAF @ 5. 
证 明 (1) 由 于 
C,(X,Y) = p(X) Bp Y) 
C, (X.Y) = e,(Y)@ p(X) 
于 是 由 定理 1.4.1 即 证 
C,(X, Y) PC (X, Y) 
= e, (X) D e, (Y) GD o, (Y) p, (X) 
= C,(X,X) OC. (Y,Y)= XBY 
(2) H+ 
Kx®yi = lx YI 
H (1) 则 证 。 
定理 1.4.1 和 定理 1.4.2 指 出 了 杂交 运算 的 几何 性 质 。 自 身 
杂交 到 自身 ;一 个 母体 杂交 后 的 子 代 母 体 再 杂交 还 原 为 父 代 ; 一 组 
种 群 及 其 杂交 的 后 代 再 经 过 杂交 不 再 变化 ;杂交 后 子 代 之 间距 离 
SLRS BRISA Ee T, RRS, 
定义 1,4.2 WER XE Siu € UR 
®,(X) = gi ° p(X) = 1239.42) = p(X) 
Hu 与 下 确定 的 模式 。 
例 1.4.2 u = (10110),X = 0 0101),WJ 
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p. (X) = uQ X = (10100 


于 是 
®,(X) = 1(10100),(10101),(11100), 
(11101): 
= ¥{(1,1),(3,1),(4,0)] 
= (1 * 10 x) 
是 一 个 3 阶 模式 。 


WE AEF XE Syn € U, 
®,(X) = p, ° @, (X) = 1Z39,(Z) = Į (X) 
也 确定 了 一 个 模式 , 易 得 
P(X) = A(2,0),(5,1)] = (* .0,*,*,1) 
B $ (x) 1) @ (X) = 和, 即 仅 有 一 全 公共 个 体 。 
定理 1.4.3 ”对 于 任意 上 EU,XES, 由 
$ (X) = g'e PX) = |Z;e,(Z) = (X) 
确定 的 模式 为 
DX) = allir 二 1 
反之 , 若 有 模式 
了 = Alaa, Jk SK] 
WHE EU, XES, fE 
f= G(X) 
证 明 Buc U.X € S.B Z € OX) MF 
Z = (z, Z) 
“= ujat) 
z,;Qu, = z Q z, HRERS u, = 工时 > = ,于 是 
下 (X) = A,r, Ju; = 1] 
反之 ,对 于 模式 
Y= Alira, sk <Ç K] 
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@ u= (ur, t) 为 
-dh i= kk (Ë =< K) 
“ lo, 反之 
X = (ri, ri) 为 
few i= (k < K) 
r= 
x, RZ 
易 证 
POO = Alisa, ik SK] 
定理 1.4.4 对 于 任意 x €C U,x€ Sih 
P(X) = pop (X) = |Z;e,(Z) = p, (X) 
确定 的 模式 为 
D(X) = AAG, Ju; = 0] 
反之 ,车 有 模式 
Y= Aya sk < K] 
MEE uE ULX € sS, tE 
= $$, (xX) 
证 阴 类似 定理 1.4.3 可 证 。 
定理 1.4.5 Rusu EU,X,YES 
(1) # @, ° @, = po oM C. (., Y) 映射 b. (X) 到 自身 ; 
(2) E @, ° pe = gM C+, Y) 映射 p (X) 到 自身 。 
证 明 设 ZE @ (X).e, ° o, = @,.B1(1.4.1) 有 
e, (C, (Z,Y)) = ghee (Z) p ( Y))) 
= @, ° e, (h (o, iZ) p (Y) 
= @, pu (Z) = e@,(Z) = p(X) 
(2) 类 似 (1) 可 证 。 
单 点 杂交 相当 于 取 v = 2 — (£ << I) Bl = WH 
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n 一 (0,- 01 .1) 
这 时 C. (X, Y) 即 是 单 点 杂交 的 结果 。 对 于 两 点 杂交 相当 于 取 
u = (0,-7°,0,1,°77,1,0,°°°,0) 
这 时 C,CX, Y) 即 是 两 点 杂交 的 结果 ， 
定理 1.4.6 ”对 于 单 点 杂交 = 2: — (k S I), ° p = 
e. HRR K use Me 中 最 左边 的 1 落 在 模式 dp. ( X) 固定 基 
困 位 置 的 堪 边 。 
证 明 设 
= (0，……0,1…,1) 
u = (ui, n) 
u u SHN 4a, Suli Llu 中 的 1 最 左边 位 置 为 ,= 
f-k+1,Mu;, = 00) Sk, 一 1), 于 是 对 于 任意 
X= (zpr) 
e, (X) = (O° 0,24, t) 
Pe ° Pa KX) = p(X) 
则 证 。 
定理 1.4.7 对 于 单 点 杂交 二 2 - 1(£ S 1), oO, pr 
Pu KRR u scu Bu PHREABERKO, ( X) 的 固定 基 
因 位 置 的 右边 。 
证 明 《类似 定理 1.3.7。 
下 面 我 们 进一步 分 析 杂 交 算 子 的 集体 性 质 
É So CS 是 一 族 个 体 ,下 己 U = S 是 一 族 杂 交 向 量 。 记 
C (S,,F,0) = S, 
C (S F.k) = T.(C(S,.F,E#E —1)) 
= 1Z; 存 在 X,Y € C (S,,F,£ - 1) Ru EF, 
Z=CAX,Y) RZ = C, (X,Y)I 
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# (SysF) = Ü C(S..F,k) (1.4.3) 
D4 (S,,F) 是 通过 下 中 杂交 算 子 ,对 于 S, 中 所 有 个 体 递归 杂交 
的 全 体 个 体 。 对 于 ACF iE 

Ta = Qu: a Q yw 

AF) = IT; ACF} 

ST| Sa F! = |Z € S$S; 对 于 任意 TE€ AFP), 

存在 XE S, ee T Q X = TZ! 
EE 1.4.8 SZS, FCU W 


4#(S,,F) = STAS,.F} (1.4.4) 
证 明 ”首先 易 证 
C (S,,F,0) = S, C ST(So,F) 
HARE 


C iSo’ F, k- 1) C ST(S,.F) 
考虑 
C (SpF, k) = T.(C(S,,F,k — 1)) 
设 ZEC(So,F,k&), 则 存在 X,Y € C(S,.,F,: -1)Ku 
€ 下 ,使 
Z= C,(X,Y)mk Z = C, (X. Y) 
REZ = CX, Y), WHEE T, € 2( F) 有 
T, Z = T, G C. (X, Y) 
= TB @@ X) O (z @ Y)] 
= (e @ T, @ X) D (u @ T, @ Y) 
TX. K € A 
= 人 人 “nA 
HT X, Y€ ST(S,,F), Wat FEST, € APF) AEX ,Y € 
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So 使 TX = TX ,TY = TY , FÉ T, @ Z = T, @ X s 
T OZ = T, @ Y WZ € ST(S,, F), PARI T ; xF THE 
Beko C(S,.F.4) STCS F) JA m 
X (So. F) C ST(S,,F) 
下 面 我 们 证 明 
ST(S,,F) C#(Sy.F) (1.4.5) 
it Z € ST(S,,F), WHER T, € X F),#fr# X € S, 
使 TX = T4Z。 需 证 明 Z € X (S, F) ERA ARE. MT 
IFI = 1, F) = T, Til: T, = 4.7, =u, u Bu = 1. TE 
Z = = @ Z tD x @ Z = T, @) Z @ T, QZ 
由 于 ZE ST(S,,F), MRE X € S,,Y € S,,# T, @ Z = 
TQ X, Ti GQ Z = T, @ Y, FË 
Z= (T @X)SD (T, SY) = (e @ X) (u @ Y) 
= C,(X,Y) € #(S,,F) 
现 假定 1 下 1= 名 一 1 时 式 (1.4.5) 成 立 。 对 于 1F1= 大 有 
F=F,,U tut 
H+ IF, t= k - Lie 
AF})}= ITa ARa) s Tal 


则 
Tau = Taw = u @ TA 
Taun = Tas = ú @ TA 
假设 
> T. =l 
ACE, 
则 


>T, = (u@ E T.) (u E T.)= 1 


ACF 
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对 于 任意 Z € ST(So,F) ,存在 X... Xa, € S, 使 得 
Z= > 'T.Z 


ACF 


= (uO Š) mY BDUD YI TAY,.,) 


ACK, i ATA, 


由 于 ;= tM LQ = T ,s= (Rf, T. ST, = 0,0) 
SS TaYaus S> TAY, , € STS, F) 


ACK, ACK. 


MME FA So, Fe), FE Z € x (S,,F),WüF, 
对 于 S, = X , RNA 
(RR,F) = ST(X,F) (1.4.6) 
式 (1.4.6) 表达 了 X 经 过 下 中 所 有 杂交 向 量 杂 交 后 的 构成 ， 
ST(X,F) 反映 了 式 (1.4.1) 的 性 质 。 


1-5 遗传 机 制 的 过 程 分 析 


在 遗传 算法 中 ,有 选择 .杂交 和 变异 机 制 , 对 于 这 些 机 制 的 性 
能 的 分 析 是 遗传 算法 分 析 的 基础 ,而 这 种 性 能 分 析 必 须 在 遗传 过 
程 中 进行 ;为 了 理论 分 析 需 要 ,我 们 考 虚无 有限 种 群 的 情形 。 
设 S = 10,1!! 为 个 体 空间 ,不 妨 用 i 表示 S 中 个 体 。 若 1S1 = 
M.W); = 0M ~ 1。 假定 中 为 S$ 上 的 概率 分 布 。 
X 1.5.1 称 S 上 的 随机 变量 访 为 无 限 种 群 。 
记 
a, = PIX = i} (i = OM -1) 
BI 
A = (agency = laji € S) 
AXPSHAE Hk fiber ta PIB A 为 无 限 种 群 。 
种 群 是 无 限 种 群 的 特殊 情形 。 对 于 例 1.2.1 中 的 种 群 广 | = 3, 


第 1 章 ”遗传 算法 的 几何 理论 55 


X, = 1,X = 6,X, = 2 上 分 布 为 
PIX =3'=P{X = l! = PIX = 6| = P|K = 2! = 


PIX = 0 = PiX =4) = P!X = 51 = P|K = 7i = 
于 是 得 到 
A = (0, 0.25, 0.25, 0.25, 0, 0, 0.25, 0) 
由 此 可 见 ,种 群 是 无 限 种 群 的 一 个 样本 。 
H $, AS ARS, = 1 当 且 仅 当 i = 7,6, = 0 当 且 仅 当 
ixj.id 
F, = fli) (;,j € S) 
其 中 i) b € S 的 适应 值 , 干 是 得 到 M x M BER, 
用 1 工 表示 M 个 分 量 全 为 1 的 向 量 , 依 照 适应 值 的 选择 算 子 , 则 


有 
$ __F:+A 
F(A) = F ay (1.5.1) 
HET TIER TE SA 
fli): 
F(A = Sy) a 1.5.2 
(A) 2 LUFO) > i ) 
F(A) 即 是 在 具有 分 布 A 的 无 限 种 群 基础 上 ,通过 适应 值 选择 而 
得 到 的 新 的 无 限 种 群 。 


式 (1.5.1) 的 过 程 可 以 重复 进行 , 即 
ËO (A) = 下 (六 (4)) 


FCA) = PROA) 
这 个 过 程 即 构成 了 按照 适应 值 选择 的 过 程 。 
165.1 假定 S = (0,1) Ama: 
CO = 6 Fly=1 
fO) = 2 f(3) = 3 
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若 给 出 S 上 的 无 限 种 群 萝 为 : 

a = P(X =0)=0.2 a, = P(X =1)=0.4 

a, = P(X =2)=0.3 a, = P(X =3) = 0.1 
由 式 人 .5.2) 即 得 

F(A) = (0.48 0.16 0.24 0.12)" 
[ra] $Y #9 

F(A) = FC(FCA)) = (0.75 0.041 0. 164 0.086) 
一 直 进 行 下 去 可 得 

lim F(A) = (1000) 
于 是 了 上 在; = 0 时 有 最 大 值 。 

HT (n) 表示 经 过 n 步 适 应 值 选择 得 到 的 个 体 , 则 
P(A), = PIT, (a) = i/A| 
= PIT, = iAF "no( A) 


= FUR’ (A)), (1.5.3) 
定理 1,5,1 对 于 无 限 种 群 的 适应 值 选 择 有 
POA), = Le (1.5.4) 


DS G) * a, 
证 明 $n = 1 时 即 是 式 (1.5.2)。, 若 式 (1.5.4) 对 指标 成 


六 ,由 于 式 (1.5.3), 则 
EDCA), = FUR (A)), 


2f U) a, 
SYG) a, 


J€ S 
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57 
由 归纳 法 则 证 。 
定理 1.5.2 HS 上 的 初始 无 限 种 群发 有 分 布 
A = (a: iE S) 
id 
So = fi; a; > 0| 
S, = |: € Sos fli) = max (i)i 
于 是 
a = lim PT, (n) = i/Al 
a; 
* a? € S, 
= Que (1.5.5) 
0, i€ S, 
HAE C > 0 ff 
> IPIT, (n) = ;/A| —a, IS CA" (1.5.6) 
£ 5 
其 中 


A = min 


fea >0Hi & S| 
Fan 为 f RAE, BY F imax = Slip). Cig € Si)。 
证 明 ”由 定理 1.5.1 即 得 
. . . (FUG + a, 
limP{T,(n) = i/A} = lim aE? 0 
mem on 一 是 EGY +a, 
= tin STR) 
> (fF) s, 


JES 


a 


X m) + 
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KF: ES M lim( LS) - 0 MAH) E S087 € S 时， 


im( HE) = ° KaR SG) > Ai) 出 证 式 (1.5.5)。 
下 面 证 明 式 (1.5.6)。 由 于 
Dy IPIT, (a) = i/Aļ-a, | 


-Wi fra * di a; 
€s, SSG)" `a, Ya, 
JES €, 
| YG) «a, 
ES, 


DUU + a, 
jes 


a; 
+ t 
igs, (Ja + [ H i)" 
JES, fii) ; JES, fG) T 
A (fü y" 
2 VA l 
< FES, ` J mos a; 
= ， 站 wa] 
“S, a; + s: (Gy, 22 
€s, J&S ` mx 1 
. 1 a, 
+ 
= A" Ta, 
EN 
a” >a, 
a, 7&5, 7 a; 
+ 
< >a, | > a, a" la, 
JES, 13, Fa 
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148 


则 证 。 

定理 1.5.2 指出 ,对 于 任意 初始 的 无 限 种 群 , 按 适应 值 选 择 算 
子 重复 进行 ,最 终 可 以 实现 使 CG) 最 大 的 i 个 体 有 较 高 的 概率 ， 
只 要 在 初始 无 限 种 群 中 存在 i 个 体 ,使 (站 = max sj od 的 大 小 
BOE TMB EE A 很 大 时 ,收敛 速度 是 很 快 的 。A 很 小 时 ,收敛 速 
BE LEAR A 的 大 小 依赖 于 最 大 什 与 次 最 大 值 之 比 ,显然 有 > 1。 
对 于 有 限 种 群 ,由 于 选择 算 子 只 能 在 初始 种 群 中 进行 ,不 断 重 复 先 
择 算 于 的 结果 仅仅 可 以 在 初始 种 群 中 找到 最 大 值 ,由 此 可 见 ,仅仅 
采取 依 适 应 值 的 选择 算 子 ,使 遗传 算法 收 全 的 必要 条 件 是 初始 种 
群 包含 有 全 局 最 优 解 。 

定理 1.5.3” 设 S 上 的 初始 无 限 种 群 丸 有 分 布 


res | Sy l= N 
a, 


0, j & S, 
则 
SOPIT, (n) = iZAl—a,| 
res 
=2-2185 1.5.7 
BS, 
其 中 


£: 
1 


limPIT,(n) = i7A! 


1 . 
“frais 
0, i & S, 
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Š, = 48s f(i)} = maxf(j) io 


证 明 首先 易 证 
Jr - fi <l 
SUG)" [S If. + A GGH TST 
J€ S, 15 5, 
(1.5.8) 
于 是 得 到 
SIPIT, Gi) = i/A} -a,l 
qa 
Jx l 


= 2 IPIT, Ca) = i/Al| È SUE TSN 
JE Sy 


= S1IPIT,(n) = i/A]| 
fas, 

1 Fw 
Hit + [Ts ; | 


4 


=1+ 2 [PIT (Ca) = i/A}) - X 1PIT, (a) = IAT 
(ES 


EEA 
Jox 
=2-2\s,|- — = 
' PGG 


推论 1.5.1 ”在 定理 1.5.3 的 假定 下 ,有 
a oe N 
2 IPIT,(n) = i/Al al 2737 r)a 

其 中 

ef fr, 
À = min( oes +i € Se) 

证 明 ”由 定理 1.5.3 易 得 
DIPIT, (a) = i/Al -a;i 
ies 
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f. 2|S,| 
=2-2135,| = - 
' PEG f(D)’ 
eG Z(E) 
-> - 21S, | 
7 [EDY 
Isit D(F) 
213|| 
s2 TS Teds! TS Da" 


2(1S,| —IS DaT _ N Yi. 
< TS, | = Ts -1 


推论 1.5.1 说 明了 收 襄 速度 与 N AK, N Eb juk BR AE BR, 
PEH: & S, 时 有 
a; = lim P| T,(n) = 1/Al = 0 
于 是 了 的 最 大 值 若 落 在 So 之 外 ,通过 适应 值 的 选择 算法 则 不 可 能 
得 到 全 局 最 优 值 。 
变异 是 一 个 重要 的 遗传 机 制 。 如 果 没 有 变异 ,遗传 过 程 经 常 收 
伍 到 局 部 极 值 。 在 没有 变异 的 情况 下 .遗传 过 程 要 达到 最 大 值 依赖 
于 初始 种 群 的 性 能 .下 面 我 们 在 不 考虑 选择 的 情况 下 研究 变异 的 
规律 , 即 假定 对 于 任意 个 体 的 i€ SA 
PIT,(0) = i/A} = a; 
定理 1.5.4 HA ETIS FEE MUFER n > 14 
PIT, (n) = TAI 


= 2a, - LI [0.5 + (6 — 0.5). (1 -24)"] 


(1.5.9) 
其 中 为 变异 概率 。 
ER ”首先 我 们 考虑 变异 使 个 体 ; 转移 到 个 体 j 的 概率 ,由 
于 i 的 分 量 的 变异 是 独立 的 , 且 
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- . 一 下， i, = h 
PIT, Ds = p Zb = 
1 ak ), dh a, | Ms ¿ = j, 
于 是 
PIT (1), = jk Zb | = p+ 6,1 -2p) (1.5.10) 
从 而 


PIT, (2 +1) = jZT (n) = i} 


= [I (e + 5; (1 - 282) (1.5.11) 
天 一 上 
我 们 用 归纳 法 来 证 明 式 (1.5.9)。 当 nw = 1 时 ,由 式 (1.5.11) 即 得 
P{T, (1) = ¿ZAl| = >a PIT, G) = iri} 
fe 


+ 
= 2a, ~ HG + 8, 2p) 


= Jia, > I 0-5 +6, - - 0.5) + (1 — 28) 


于 是 式 (1.5. 9) 对 于 n = 1 F 55k (1.5.9) HF n Re, M 
PI IT, (m +1) = 2/Al 


= SPIT, (2 + 1) = 2/T,,(n) = i] + PIT, (n) = iZA! 
i€s 


= pa . il Dole + S (L — 2@)) 
- [0.5 + (a, ~0.5) (1 — 2" ] 
我 们 将 i, 3,2, 分 以 下 情况 : 
(a) ¿ = % ARA h = bo, Æ i 两 种 情况 ; 
(b) ¿, Ay BRA = ¿ My, = iz = i, 两 种 情况 。 
于 是 有 
Z(+, (1 24))[0.54(8,, —0.5)- (1-28)"] 
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= 6.11 - 2)(0.5+0.5(1 ~ 22)") 


++ (0.5-0.501 — 28)" )] 
+ (1 一 & LC ~ #)(0.5-0.5(1 — 2)" 


+ p(0.5+0.5C1 — 24)")] 
= 6,.,(0.5+0.5(1 ~ 24)""') 
+ (1 - 6,, (0.5 -0.501 — 20)"") 
= 0.54 (8. —0.5)(1- 2p)" 
从 而 即 得 
PiT, (n+1)= xz/Al 
t 
= dia [I [0.5 + (8 - 0.5) - = 2a)" ] 
Hs k=l 


定理 得 证 。 
推论 1.5.2 设 A 是 初始 无 限 种 群 ,yx < 0.5, 则 
1 


lm P| T, (2) = i/A! = TST (1.5.125 
I H We 9 EÉ, BD 
>) | PLT, (a +1) = i/A! — rl 


1 S 


= izal -= rhy (1.5.13) 
证 明 ”由 定理 1.5.4 及 (1 - 2) <1, WHE 
limP|T„ (2) = iZA| = >, ,0 5) 


_ í _ fl os 1 _ 1 
= x - (0,5) = (>) = 357 = Ts] 
对 于 定理 1.5.4, 若 初始 于 良种 群 A 为 均匀 分 布 , 则 对 于 任 
£ n > 14 
PUT, Cn) = iZA | 
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[0.5+ (ó, ~ 0.5)(t — 2g)"] 


1 


J [0.5 + 0.51 - 24)" +0.5—-0.5(1 — 2)"] 
be 


H 
>7[0.5 + (i, — 0.5)(t - 22)" ] 


Ë 


FRA 
sai d 
D PIT Gn + D = ;/Al re! 


Plet ag C -29))- hrl 


i 


_ _ 1 I 

= > X (a -TBT) i+ da 291| 
1 lead 

<2 a(n) ~ pet] S IT (+ 4, 1-20) 

- _ 1 

= > a;(n) ril 


. 1 

SPIT) = j/A| rt 
则 证 式 (1 .5.13)。 

定理 1.5.3 及 其 推论 说 明了 ,不 管 初始 无 根 种 群 给 出 什么 分 
布 ,其 极限 分 布 都 是 均匀 分 布 。 也 即 是 说 ,变异 运算 不 断 重复 进行 ， 
可 以 达到 个 体 空间 中 任何 个 体 。 变 异 把 整个 个 体 空 间作 为 搜索 空 
EA 

我 们 进一步 考虑 杂交 算 子 。 取 S 上 的 随机 变量 立 , 则 

PIT. Cn) = i/T, (n) = jT, (n) =à} 


= PIGO POUP u))1 
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例 1.5.2 单 点 杂交 是 下 面 集合 上 的 均匀 分 布 : 
So = {100.01),00.….…011),.……, (112 tI 
So 中 内 有 /个 元 素 , 即 在 S。 上 的 均 名 分 布 概率 为 174。 单 点 杂交 
是 在 T, (n) 中 取 右 边 部 分 ,在 T, (n) 中 取 左 边 部 分 而 构成 新 的 
后 代 。 
例 1.5.3 MARX u 是 下 面 集合 上 的 均匀 分 布 : 
S, = 100. 01),(0-: 010), =, (10…0)， 
(0--011D.(0-- 0110), =, (110-0), 


....(1 1 -:- 1 )| 
两 点 杂交 是 在 中 间 集 部 分 采用 T, Ca), 而 在 其 它 部 分 采用 


T, (noth F S, 中 有 元 素 个 数 为 


! Sal = D+ 2 = MED 


于 是 两 点 杂交 之 是 S; 上 分 布 概 率 为 Tr72 y 的 均匀 分 布 。 


例 1.5,4 询 义 随机 杂交 是 按照 分 布 
Piu = ul = eed 一 pil"! 


4 a = 0.5 时 
Pla = a| = 1 
表示 均匀 杂交 。 
例 1,5.5 半 随 机 杂交 ,& E S, 上 的 均匀 分 布 。 
S; = 


iw ES, lal = y ,为 偶数 


EH viel = 人 了 | ,为 奇数 


| € s.lu| > 
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这 类 杂交 腾 每 个 双亲 的 一 半 基 因 杂 交 后 产生 后 代 。 
定理 1.5.5 iu = (R U a) BS = 10,1 上 的 杂交 随 
机 变量 , 且 对 所 有 的 天 ,六 € 11,2,:: Il. E Ame 
Plu, = u, > 0 
则 


limP| T. (n) = i/Al = ITPi7r ay， = Al. 


| (1.5.14) 
其 中 A AP) ACER Ph BE KEKERE 


SIPIT, Ga) = iZAl1 -a@,| = C: (A (P. TD) 
IES 


(1.5.15) 
其 中 
ACP,,2) = max} Pju, Ze unli Bam << 1,k 2 ml 
(1.5.16) 
证 明 ”为 了 证 明和 叙述 简单 起 见 , 我 们 考虑 单 点 人 杂交。 不 难 证 
明 


PIT.) = i7A} = >， oa, tant Plul 
(Ca DC oa Y= t 
由 于 单 点 杂交 是 


S = 10-01),00--O011), 2, (113 DI 
上 的 均 名 分布 ,出 


PIT,(1) = ;/A| = + 3 aa 
(Ca RTH mia y= i 


m 


OTT O a 


其 中 a; .. Ra. o 是 a 在 二 进 制 表 示 下 的 边际 分 布 。 特 别 当 
及 是 S 上 的 均匀 分 布 时 有 
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1 
Qo, = J 


_ 1 
Goya T pik 
于 是 
PIT. (lI) = i/A| = 上 
仍然 为 S 上 的 均匀 分 布 , 则 可 证 


PIT (n) = 站 = 六 
同样 可 证 
PIT.) =ils Ya, = 4 
f te 


FEA 

PIT.(n) = i/Al = [[ PIT.) = + ZA| 
BCT. 5.14) 显然 成 立 。 

UFR AR k < m ;计算 

Pla, = u,| = Pli, = 0,z, = U 

BRA 
Plu, =0,a, = 1} 
= Plu = (00--1)}+ Plz = (011) 
+--+ Plu = (01-1) 


=í l ， 上 
po 1-7 
对 于 其 它 情 况 , 均 有 Pla, ul < 1- 1⁄4, TE 
A(P.,) = 1- + (1.5.17) 


对 于 两 点 杂交 有 
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a(R D = 1-744 (1.5.18) 
Oe FBR LEY) 283844 

ACP, ,f) = 1-26 + 2? (1.5.19) 
特别 对 于 均匀 杂交 有 

ACP, ./) = 0.5 (1.5.20) 
如 果 记 

A, = mind (P, ,/) (1.5.21) 
其 中 p, ERTA n] BENS 28 2ë , W PERL AREA 

A(P..I) = à, (1.5.22) 


定理 1.5.6 设 ! 是 偶数 ,S = 10,11',& 为 杂交 算 子 ,对 于 以 
下 三 个 命题 

(1 Aa(P.,1) = X; 

(2) WEB kom Sik ZZ m ,Plu, = us! = A; 


(3) P 


有 关系 : 
(1)>(2)=(3). 
证 明 首先 计算 


DUP fa, = uu = ul = 
k l 
+ aja etal = D 


- i _ 
bul = += 00 


[ul -lul — 1) 
2 


= EMD yl U-la) p 12 


(1.5.23) 
于 是 有 


FD PD) > SIP lin = bn 
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= ST SUP lay = uu = u| Pju = ul 


r€ k= m 
> min] Pla, = i /= uhu € S} 
= m 
= Mia?) (1.5.24) 
(1)= (2): #0) 成 立 , 即 4(P,,1) = Àj, = mina(P; ,1t) 式 


(1.5.24) 的 不 等 式 变 为 等 式 .而 3 RED 项 ,于 是 (2) 必 
须 成 立 。 

(2) 一 (1): h a, 的 定义 可 证 。 

(1)=-(3); #(1) REM SOP lu, =u,/a = ul = Cc; 对 于 
所 有 u € S 成 立 , 则 证 (3) 成 立 。 

定理 1.5.5 和 定理 1.5.6 说 明了 杂交 算 子 的 性 质 。 杂 交 算 子 
反复 运算 的 结果 依赖 于 初始 分 布 。 

选择 ,变异 和 杂交 机 制 各 有 其 功能 .单纯 利用 选择 可 找到 局 部 
最 优 值 , 变 异 可 以 使 搜索 遍及 整个 空间 ,而 杂交 结果 依赖 于 初始 分 
布 -因此 ,一 个 完整 的 遗传 算法 应 当 是 选择 、 变 异 和 杂交 运算 共同 
构成 的 。 


1-6 ”遗传 算法 的 几何 解释 


假定 T, 为 选择 算 子 ,TT, 为 杂交 算 子 ,TT, 为 变异 算 子 , 记 
G(p) = T, ° T. ° T,( p) (1.6.1) 
其 中 pAS 上 的 无 限 种 群 , 即 
M-1 
bP € A = age Quads a, = 0, Da = 1| 
=O 
BJ G 3 A 到 A 的 映射 。 
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遗传 算法 是 固定 长 度 N 的 有 限 种 群 。 例 如 取 S = 10,1 = 
0,1,71, B It Ph š$ 
X, = (0110212343) 
TU 30 hE Ta 
po = (0.20.30.20.20.1000) 


说 说 这 
ONA —A 


图 1.6.1 遗传 算法 演化 过 程 
由 于 X, 为 有 限 种 群 , 按 照 G(p) 提取 长 度 为 10 的 样本 即 得 
到 下 一 代 种 群 ,比如 
X, = (1020132434) 
于 是 得 到 
pı = (0.20.20.20.20.2000) 
如 果 我 们 把 4 RES 中 的 (na - 1) 维 西 才 面 体 , 则 遗传 算法 过 程 可 
视 为 图 1.6.1 的 过 程 。 
如 果 我 们 假定 种 群 规 模 为 N, 则 种 群 变化 范围 为 4 中 的 有 理 
点 , 即 在 下 面 的 范围 中 变化 : 


Lvw 1 < 
NAM = RUN Naa); SON, = N 
NM NI Ü M~1 =— | 


定理 1.6.1 设 p 为 当前 种 群 , 则 对 长 度 NN 的 有 限 种 群 ,其 下 
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代 种 群 r(p) 的 期 望 值 为 G( 5). 
证 明 ”为 了 得 到 下 一 代 种 群 


_ (Xa ... Nua | 
q N ° ` N 


则 按照 GC p) 抽样 , 即 得 


pv = (x. (GCP) 


p= (yeu 


: N — Ng ~ tt Ny- 
Pua = ( N M \E id 
M-1 


q 发 生 的 概率 为 popu- BI 
(Gip) n 


< M , 


于 是 p, 的 期 望 值 为 
N, (G(p),)* 


N! i — 
A NM, N,! 
根据 多 项 式 定理 有 
M-i N e a N 
(Say =N! 2 1 
+ 一 上 0 JEM + 


M-1 
Ne (Sey = Nt D NID 
i=0 Ny tees = iM : 
于 是 p, 32E 539 S 5 5 


CENAZE = (C), 
则 证 。 
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由 此 可 见 , 在 无 限 种 群 的 遗传 机 制 中 ,车 给 出 初始 种 群 p, 则 
得 到 咀 传 序列 
b, G(p), G(p), ot 
当 种 群 为 有 限 值 时 ,G{p) 可 以 得 到 样本 分 布 ; 由 于 样本 是 多 样 
的 ,其 期 望 值 为 人 (pp)。 由 于 定理 二 .6.1 与 样本 大 小 N 无 关 , 所 以 


G 描述 了 所 有 种 群 规模 的 变化 规律 。 
定义 1.6.1 车 对 于 任意 也 和 有 
向 =" >, Lg; ish (1.6.2) 
则 称 变异 为 独立 的 。 著 
站 二 AL 一 AP) (1.6.3) 


T, 表示 i 中 1 的 个 数 ,mw 表示 将 任意 j) E SBA Bi 的 概率 。x 
被 称 为 变异 率 。 

定理 1.6.2 SRS jy 是 独立 的 。 

证 明 ”首先 有 


ao o oy ose 7 HT 
2 e ja ao 4 p) 
= _ t ` — 5 
I (1 22 PNE E=) 
ATi -~eA@QjPeSuMe Oi = k Oj TELEPE: LRA 
相当 于 在 ww € S, = 1i;7Qe = 0! ERM, BD 


PARZ = (1 -o D (ri) 
=a fe e Qe (i — ele 


a 
于 是 易 证 


Ñ 1 
> His p2 Hi 
bih = Ü ¿G = ü 
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=(1- py)" (4; exe 一 (=) 


= A 
定理 1.6.3 ”如果 变异 是 独立 的 , 则 
PIT, (Tala), TaD = zl = PIT, (E Cr.) = z| 
(1.6.4) 
对 于 任意 ,yz ES 成 立 。 也 即 是 说 , 先 变异 后 杂交 与 先 杂 交 后 
变异 有 相同 的 分 布 。 


证 明 ”计算 
PIT, (Tala) Ta OD = 2h = Y pepe; P en 
typ EM 
其 中 


M = IG jh (z BI ORB(y BJ) QE = <! 
= Gjt); (的 天) 四 yy = zo, 


b=: QBI! 
于 是 
PIT.(T,(z),T,(y)) = <! 
= Ë+ + Pi x` `" f 
> 2 one fm 
MBA 


ipp Ek = 56 =kOSDE RDS 
SLO: =kOSHEQ=€ QS 
H , 的 独立 性 有 


— N 1 
2 m = > “m > t; 
KORP = b RGPS) =0 AEM G= 
ogy ca _ 
= > tb, > Hp = Ke 
REI = 0 Fo = 0 
于 是 


PIT, Talx), Tay) = z| 
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= P =) 


fa 
n: tect fon 


_ ~1 " T P: 
= Zn “T 
rf ayo = ABs 


= PIT, (T.(x,y)) = z! 
定理 1.6.4 Mm (2) BR xz, 通过 杂交 与 变异 而 得 到 + 
的 概率 , 则 先 变 异 后 杂交 的 概率 为 


一 By t P; 
m. (z) = S uty 2 ` Xi CG ABB DE = zi 
ijk 


(1.6.5) 
而 先 杂 交 后 变异 的 概率 为 


` 


- + 
m. z) = 22, 25A, X UDD = hy (1.6.6) 


证 阴 由 定义 直接 得 到 。 
定理 1.6,5 无论 变异 是 否 独 立 ,杂交 与 变 蜡 谣 先 部 后 , 均 有 有 
mt, (z) = m. (z) = M pzp (0) (1.6.7) 
证 阴 ”由 定理 1.6.4 知 ,x 与 是 对 称 的 。 又 因为 
IBN O*¢CDyBN Ok = = 
Sit T 
(x DIPBz Oe Bly Pj Gr Wek = 0 
则 证 先 变 异 后 杂交 时 有 
m, (z) = m, 2) = mp... pe (0) | 
对 于 先 杂 交 后 变异 有 类 似 证 明 。 
记 
M = (m,(0); 1,7 € S) 
W M AX ic 
Condy = Xis = Oty sk 
& = Ca) si.7 € S) 
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于 是 
a, t (ags Que)! = (agpi Qim- )' 
容易 验证 o 是 对 称 的 , 且 
g, * G = G; = 60, ° 8, 
取 映 射 WA AA 
Ala); = ala Maa 
以 及 映射 耶 :A — AW 
Sm (p) = PIT.(p)= il 
于 是 得 到 复合 映射 Wo FAA 
定理 1.6.6 对 于 标准 遗传 算法 有 
G(p) = A- Hp) (p € A) (1.6.8) 
证 明 HT 
G, (p) = PIT,(T,(T,(p)), T, OT (p))) = il 
SPICT Cp). T.(p)) = (x,y) 
.PH = T.CT, (z), T,,(y))1 


= DAPA p), Ded li = T, (u,v) 


= LAP)» Ap), Bat > Ë P5 Pi 
GCD = ; 


il 


一 > Ap), Kp), > 2. b A sect. 
= SUA p) Ap) m te ep (Ü) = (he Fp)), 
则 证 。 i 
定义 1.6.2 MRUFER pCa 
lm G'(p) = pp € A 
F G 是 收 襄 的 。 这 时 
Gip) = G(limG*(p)) = lim G%'! (p) =p 
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fk p 为 G 的 不 动 点 。 | 
£2 1.6.7 UG 有 有 限 个 不 动 点 ,9p 是 连续 函数 , 且 满 足 


x G(zx)=—>e(z) > e(G(zx)) (1.6.9) 
MUJ G Fou SAY 
ER hw G SN) WA PRI G HARADA, iC 
=ixz€ aA; lle—-—w, il <et G € No) 


取 充分 小 ,使 x € UNG & UG Æj, k <N) AWARE 
来 证 明 ， ,假定 G PRA, a ERE RG" (2)} BEERE 


A U -Uu, 的 补 集 口 ,于 是 存在 |G"(x)| 的 极限 点 z 仿 U. X 
因为 plr) > pg(G(z)), 由 的 连续 性 ,存在 e > 人 0 使 对 于 V = 
ly€ A; ly- zl <el @ 
plz) > p(GUV)) = maxp(G(y)) 
AM gpl) > plGIV)) SpV) AB IEAI) 的 
RERA, GATE UG'( V) 中 ,于 是 plr) > glr), FR. 
我 们 指出 ,条件 式 (1.6.9) 类 似 于 Lyapunov 函数 。 式 {1.6.9) 
也 可 改 为 
x É G(r) pla) < @(G(x)) 
EX 1.6.3 ”我 们 称 适 应 值 落 数 为 线性 的 , 若 存 在 a ER, 
b € RE 


i-l 
FG)=a'i+tb= oy asis +b 
线性 适应 值 函 数 相当 于 对 基因 分 量 加 权 。 特 别 当 b = 0,a, = 
2+ 时 ,站 即 是 将 二 进 制 变 为 十 进 制 。 


为 了 讨论 线性 适应 秆 函数 的 不 动 点 , 先 证 明 以 下 性 质 。 
EE 1.6.8 对 于 遗传 机 制 有 以 下 性 质 : 


(1) a"i = Saji = 33a, GQ-(-pD'%) (1.6.10) 
j=0 
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(2) D (Oma (0) ~ Sa = Su) = 0 (1.6.11) 
(3) # z = 0, 则 
aul LV ag. wp (0) = (- I)" ?yey cet} 
证 明 (1) 由 于 条 .2 si, Hi € 10,1} BE, BU -(-1)5) 
= 2; , 则 证 (1)。 
(2) 由 于 
2 (Zma. (0) - 84 ~ y) 


P, 
一 = 22， Zt Eg -OF 


Orb d,s 


+ : 
=—2+ 2 > ett P: 5 Pi 
ije 


. 2 eDeDeGe Pai GMD AB OE! = 0 


Pe + — qa. 
DK BIO B ei 


=-2+ 22 


= 2 +2 op tí p= =-2+2=0 
(3) AH i P u 代替; Bu 与 v 的 对 称 性 易 得 
>= D)” mei ai (0) 
=(-1"? > C 1V? m, Qa (0) 
= (- 1)” 7 > 1) ont, eb (0) 
= (- 1)“ 7 yey accent ， > 1)’ m, a (0) 


T 
= (一 1)" 7 X 1692 = Be! 
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Ps D Oy > Pai P pe : 0! 
= (— 1)" 7 ua! = OY! 
A Pet pi Ta 
: > =a C L) XE = 


ahr 1 Ps + b; ` 
= (— 1) > D Kae! = apa 


e (— 1) han 2 


二 《一 D* yay O> . > —_ s 


定理 1.6.9 如 果 适 应 值 是 线性 的 ,变异 率 上 = 0, 则 G 是 收 
Slo RS ATE A 的 顶点 上 ,种 群 平 均 适应 值 是 单调 增 的 。 
证 明令 g = G(p), 则 
Cf pa, = (f'p)( fb.) 
+ SA Pf» (m. (0) ~ Bi) 
于 是 
(f py fq = (fp) Sfip 
+ iPS Po Dyfi Mappi (0) ~ 8...) 
利用 不 等 式 l 


Sfp. = (Dey (1.6.12) 
即 得 
fq > f'p + s'As (1.6.13) 
其 中 
s= Lp 
F p) Fp 
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Aw = A Cag, eb O) ~ 6.5) 
利用 定理 1.6.8 即 证 
A,, = 2 + ali) 2m aga. a (0) — 6,.;) 
Om wu tte (0) 一 -= p) 


= 3S Sjal- D. > (2 rts, up (0) 一 GAF 一 Ôa) 
i i 


1l 


_ I< : Ty 
3 5 SE"? Omg (0) ~ 8,5 = Ba) 
| 
一 r, [2¢- 1)" Fie a! 
i 


~(-1I)"? ~(-1)"' "J =0 
由 式 (1.6. 13) 即 得 
e(G(p)) = FCD = f'a >f p = glp) 


(1.6.14) 
(1.6.14) 等 式 成 立 当 且 仅 当 式 41.6.12) 中 等 式 成 立 , 即 
i: = (pp) (1.6.15) 


fh F 
D(f) = Sof ip. - (Dray 

表示 取 值 /, BREA p 的 方差 ,于 是 Df) = 0 SARS p Am 
Mati ED pA MTA Fy p REA 的 顶点 上 时 ,fiqg > f'p, 
TE pA aM ol p) < plq), 于 是 Lyapunov BRR a G Ë. 
有 不 动 点 。 由 式 (1.6.14) 知 种 群 平均 送 应 值 是 在 不 断 地 增加 的 。 

定理 1.6.9 指出 对 于 线性 适 亦 人 以及 0 ERE, GERAH. 
且 不 动 点 存在 .G WKAR DEA 的 项 点 上 。 


第 2 章 


遗传 算法 的 马 氏 链 模 型 


遗传 算法 是 不 断 重 复杂 交 .变异 和 选择 的 过 程 。 每 一 种 遗传 机 
制 都 与 当前 种 群 状 态 有 关 , 而 与 以 前 的 种 群 状态 无 关 。 国 此 遗传 算 
法 是 一 个 马尔 可 夫 链 。 


2-1 DIRE MRR 


FEM 2.1.1 BX, sn 01] 为 一 列 取 秆 高 散 的 随机 变量 ,高 
散 值 的 全 体 记 为 S = 1;|, 称 S 为 状态 空间 ,车 对 于 任意 Sl, 
¿ € SAS nt DË 
PUX a = ¿a ZK, = it = int 
= P|K,, = ig = 了 | (2.1.1) 
BX ;n Z 01 为 马尔 可 去 链 。 
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(2.1.1) 式 成 立 是 指 ,只 要 等 式 两 边 的 条 件 概率 有 意义 ,等 式 
即 成立-(2.1.1) 式 即 是 一 种 无 后 效 性 , 它 大 大 简化 了 条 件 概率 的 
计算 。 对 于 马尔 可 夫 链 有 : 

P |K,.; = iay Kyai = inst ZK, =i, | 

= PÍ X, a = inn ZK, = il 
` PIX... = inva’ Xana = inst Xn = i, | 
PIX, = k HK, = ú 1 PUR = ip Xan = 
inet! 

PA 2.1.1 WIE sn SO} 为 一 列 取 整 数值 的 随机 变量 , 记 部 
分 和 为 

K = S& 0) 

h=0 

Gl€,sn Z Of 是 独立 同 分 布 的 , 即 

PIE = | = a, 
MIX on 201 为 马尔 可 夫 链 。 这 是 因为 在 K, = i, 的 条 件 下 ， 
X. S itga ASE, 有 关 , 而 与 X. ，,X 无 关 , 因 此 

PAX, = i, ZK, = i, Xai = inatt Xo = ío! 

= Plea = ¿a Tihi = a 

2.1.2 设 某 种 生物 细胞 中 有 NN 对 染色 体 ,其 中 有 一 部 分 
a 型 的 , 另 一 部 分 是 5 型 的 ,在 它 繁 殖 过 程 中 ,如 果 父 代 的 2N 个 染 
色 体 中 有 ;个 a 型 ,(2N 一 门 个 5 型 ,那么 子 代 每 对 染色 体 是 a 型 
的 概率 是 AN, b 型 的 概率 为 (2N - j) 2N IE n 代 的 细胞 中 
Ba HURA, OX ; SO} 是 一 个 马尔 可 去 链 。 这 时 

PIX = j/K, =i] = CATE 


在 马尔 可 夫 链 的 讨论 中 ,我 们 看 到 条 件 概 率 
aby” = PIX, =j n = il 


i 
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起 着 特别 重要 的 作用 。 它 表示 系统 在 m 时 刻 处 于 状态 1 经 过 六 步 
转 称 夺 到 状态 j 的 概率 ,一 般 来 说 ,这 个 转移 概率 与 初始 时 刻 n 无 
Ko Bl 
Py? = PIK,., = jZK, = i! 
这 时 称 马 尔 可 夫 链 为 齐 次 的 。 
定理 2.1.1 齐 次 马尔 可 夫 链 的 联合 分 布 由 初始 分 布 
PiX% = i= p (GES) 
及 一 步 转移 概率 
b = PIX, =3/K,, = il Gi,j6€S) 
完全 确定 。 
WRA 首先 由 马尔 可 夫 链 的 定义 有 
PIX, = ,= Xo = ig! 
= PIX, = i ZK, = igh PIX, = i,/K, = i,K = il 
“PIX, = ¿i ZK, = tots K, = ty) 
= PIX, = i,/Xo = ig PIX, = i/i = il 
PIX, = inf Kaa = inal 
则 证 
P|K, = ing X= 070 X, = if 
= PiX, = is( PIX, = i,.°°,X, = ¿ ZK, = tg} 
= Pi, Pigi Pa 
定理 2.1.2 MFFHRKSRTKERE Ram 2>0,.i, j ES 


i 
"x 


8 
pyr = Y ph pu (2.1.2) 
es 


k 
证 明 ”由 概率 的 性 质 有 
BS" = PIX = j/K, = il 


= DPK, = j/X, = h,K, = PIX, = kzKN, = i! 
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= 人 Pi 全。 = k/X, = il P| Xom = ¿ZK, = 天 


(nd, (mb 


= >p: Ph 
式 (2. 1.2) 称 为 CK 方程 , 即 切 普 曼 - 柯 尔 莫 哥 洛 夫 方程 。 
假定 状态 集 S 中 状态 是 有 限 的 , 称 马尔 可 夫 链 为 有 限 药 。 记 
一 次 转移 概率 为 人 第 阵 形式 , 即 
P = (p; ij = O(n ~ 1)) 


则 CK 方程 可 以 表示 为 

P= (p), 5.7 =On-1)) = P + P 
一 般 地 有 

ph” = pe. p” 
若 初始 分 布 为 

pO = PIX, =i} 
记 

po w wee po i) 


则 x. Pens . 
定义 2.1.2 ike 20) WARAK SARTRE, p 为 
n 步 转移 概率 BARE n> l, pu) > 0, 称 状态 i TERS E 
i> j EURA i Aik j. iti’ j。 车 有 i 一 j 和 j -> AR 
立 , 称 i 与 j 互通 , 记 作 ijo 
定理 2.1.3 Ei jj, 一 上 上, 则 i 一 此。 
证 有 明 i iG ek BRE mn 使 
pr >0 py >0 
于 是 
ps”? > pl? + px? >0 
Mill i> ko 
由 定理 2.1.3 ims jek, M ick MABKREK 
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态 空间 S 分 类 。 记 
Cli) = lil Ul Kis pod 
分 类 具有 以 下 性 质 : 
CL) # a MIC, = Cli); 
(2) Bij — hsh 6 A MJ CU) NCL) = 2; 
D IFES i E S, MAR-—BH, 
定义 2.1,3 Aims MMA; — ¿W SERRA BE 
Jhi— j Mh je i, 称 i 为 非 本 质 的 。 
同一 类 中 的 状态 或 全 为 本 质 的 ,或 全 为 非 本 质 的 ,本 质 类 中 的 
状态 不 可 能 到 达 别 的 类 中 , 非 本 质 类 状态 可 能 到 达 别 的 类 ,一 旦 进 
人 本 质 类 不 可 再 返回 。 
定义 2.1,4 S 中 子 集 C 称 为 闭 的 ,车 对 于 任意 i; € C, 有 
BIC PRAT HAT BKC 外 状态 。 
显然 本 质 类 是 闭 集 , 非 本 质 类 不 是 财 集 。 若 闲 集 C 中 不 存在 
真 闭 子 集 , 称 为 最 尘 闭 集 。 若 S 中 不 存在 任意 真 闭 子 集 , 称 S BA 
可 约 的 。 
例 2.1.3 #IK,;n > 01 具有 概率 转移 矩阵 
0.5 0.5 0 O 
0.5 0.5 O 


0 0 0.5 0.5 
显然 状态 集 C = 13.41 是 闭 集 ,而 下 = (1,2) 是 非 本 质 类 。 于 是 
S=CUF 
一 般 来 说 ,任何 马尔 可 夫 链 的 状态 集 均 可 分 解 为 闭 集 C 和 非 
本 质 类 上 。 闭 集 C 可 以 进一步 分 解 为 有 限 个 闭 集 之 并 。 
对 于 一 个 状态 了 所 Si , 称 
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r, = mnla Z 1; K, = j| (2.1.3) 
AX 首次 进入 状态 j Ae 22 1;K. = J! = SMW, = °, 
A 
Ea 


f) = Plr = n/X, = il (2.1.4) . 
f ORA 出 发 经 过 = 步 首次 到 达 j 的 概率 。 于 是 


fy = Sf = Pis, , < ceo ZK, = il 


= PI Ü IX, = jlzKX, = i] (2.1.5) 
是 从 状态 ; 出 发 迟早 到 达 状 态 态 ; 的 概率 。 显 然 有 
OFS Sey s< f < (2.1.6) 


FEM 2.1.5 称 方 为 状态 ;到 状态 / 的 首 达 概率 ,f= 1 称 状 
态 AR BH f, < 1 RRA i 为 非常 返 的 。 
对 于 常 返 状态 i 有 


f = St pt = 1 (2.1.7) 
a= 
于 是 产 ”是 状态 ; 返回 时 间 的 概率 分 布 , 从 而 
mi, = Sy af? (2.1.8) 


是 常 返 状态 i 的 平均 返回 时 间 。 

定义 2.1.6 ATM I. m, < ©, REI HERE 
BY 35 m, = oo RRA i 为 零 常 返 的 。 

从 状态 i 出 发 无 限 多 次 到 达 状 态 j 的 概率 为 

gs = PIR X38374 n Si.X, = jzZK, = il 
= PIN Ü IK, = ;1⁄&, = i!l 

定理 2.1.4 状态 i 为 常 返 状 态 当 且 仅 当 g = 1.148385 ; 为 非 

HERSEK z, = 0。 
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证 明 r 
g, (m) = PI BLA m Tn Sith X, = ;/XÉ, = š 
g,(m + 1) = S pir = k, 
k=1 
ENA m +n > 1#Ë K, = ;ZK, = : 


= YAP ay Cm) = f; * g (m) 


特别 有 
E, (m + 1) = faga(m) = figa (m - 1) 
= (fagu (1) = Cf, 9°"? 
FRA 
g (m +1) = f,( f )" (2.1.9) 
ga = limg; (2) = lim( fe)" (2.1.10) 


FA (2.1.10) 则 证 。 
定理 2.1.5 车 i 为 常 返 状态 ,i 一;, 则 


Bn = fi =1 
常 返 状态 必 为 本 质 状态 。 


证 明 ”由 于 对 于 任意 m 2 1 #8 


Bi = DPR En 
于 是 对 于 常 返 状态 ; 有 
l-g: = eed ~ gs) = 0 
也 即 对 于 一 切 n 21 R k € SS 有 
pP- gs) = 0 
若 ; 3 molt p > 0, 于 是 g = 1, 从 而 了 = 1, 即 
HE j — i。 
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定理 2,1,6 若 i 是 常 返 状态 ,i — ; Wj 也 是 常 返 状态 。 
HERA ovu 为 i 在 1 多,| 中 出 现 的 次 数 ,于 是 
s = Ds) 
从 而 
E, (u,) = E(oə, ZK, = i) 
DEl GA = i) = Dpr 
n=l n=] 
于 是 状态 i 常 返 的 充 要 条 件 为 
Eu) = Dp = ° 


车 š 是 常 返 状态 ,i — j Mj} -~ i ,于 是 存在 n,n Z= 14 
py >0 p >0 


从 而 有 


人 po > es" Z= pr pr Zip = co 

AM ; 也 是 常 返 状态 。 

由 定理 2.1.6 可 知 , 常 返 状态 是 类 的 性 质 。 同 一 类 的 性 质 或 为 
常 返 的 ,或 为 非常 返 的 。 若 i,i 同属 于 一 个 常 返 类 , 则 g = f= 1, 
其 而 常 返 类 中 任意 一 个 状态 出 发 必须 无 限 雪 次 经 过 类 中 任何 一 个 
状态 ,与 此 相反 非常 返 类 中 任何 一 个 状态 出 发 ,只 能 有 限 次 经 过 类 
中 在意 一 个 状态 -因此 非常 返 类 是 一 个 闭 集 时 只 能 是 一 个 无 限 状 
态 集 。 因 此 对 于 有 限 的 马尔 可 夫 链 非常 返 类 必 为 非 本 质 类 。 由 于 

By T JuBs 

当 io 时 ,所 >0, 于 是 = 0 5 35 g, = 0, 于 是 i 有 限 次 
到 达 j, 当 且 仅 当 j 有 痕 次 返回 j。 当 本 质 类 是 有 限 状 态 时 ,i 必须 无 
限 次 返回 i ,于 是 i 为 常 返 状态 ,因此 对 于 有 限 状 态 的 马尔 可 夫 链 ， 
本 质 类 必 为 带 返 类 ,而 且 返 回 i 的 平均 时 间 是 有 限 的 ,于 是 必 为 正 
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WBE HUES, GRRE SK RS OR AAR 
正常 返 类 (本 质 类 ) 和 一 个 非常 返 类 { 非 本 质 类 )o 对 于 不 可 约 的 有 
限 状 态 的 马尔 可 去 链 的 状态 空间 是 一 个 正常 返 类 。 
给 出 有 限 齐 次 马尔 可 夫 链 的 转移 矩阵 P BY 
P = (p;;i J € S) 


其 有 以 于 性 策 ， 
(D &CH-TtAHS WHER ICCA 
2, = 1 


BD 
P. = (p ij € C) 
是 一 个 随机 和 矩阵 ,正常 返 类 {本质 类 ) 是 一 个 闭 集 。 
(DF Wa ERER MA P iE F 
pa #1 22, = 


BE SRA m TE AOE MO PARE FEI F W P 
可 表示 为 


U 0 0 0 0 
0 U, 0 0 0 
p= We : i : 
y w 0 0 0 
0 uv, 0 
Q, + so @, W 
Kp U SW EAB. (i < m) bÆ D AU, < m) 是 随 


机 矩阵。 

定义 2.1.7 WER P TE t > 1,18 > 0, 即 对 于 任 
Big € 5S, 均 有 p > 0, 称 PP 为 本 原 随 机 矩阵 。 

定理 2.1.7 设 王 是 本 原 随 机 和 矩阵 , 则 存在 一 个 平稳 分 布 , 即 


第 2 章 ”遗传 算法 的 马 氏 链 模 型 89 


存在 分 布 x AEn P = x', 也 即 对 于 任意 ; 有 
> mp = T, > 0 
证 明 设 P 为 N xN 阶 方 阵 , 对 于 分 布 向 量 
P' = (Piss py) 


ic 
2 bibs 
r(p) = min + 
于 是 
N 
b; * r (p) < > pp, 
ia] 
N N N 
r(p)- > pb, < 2 b, bi = 1 
š izi jel 
N 
r= O =1,p, 2 0(; < N)] 
r=1 
由 于 


A= IP = (pa Ps) Sp = =1 :pi 20(i<N)} 


是 有 界 闲 集 ,x{(p) BA LARS D BJ E pk Se oR, AU F E 
xe A, tE 


于 是 
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Bp 

ra < xr P 
记 

Z= a P- rx 
+E 


ZTP = (x P) -P-rir P) 
# Z= 0,W i P > 0,98 Z P > 0 ,于 是 对 于 任意 ; 有 
< P) P) 
(al P); 
x Pt 是 一 个 分 布 ,这 与 + 的 定义 矛盾 ,于 是 必 有 Z = 0, 即 
m'P = rx! 
AF PA 都 是 分 布 , 必 有 r = 1, 于 是 
z! p = x! 
即 x 是 平稳 分 布 。 

EX 2.1.8 对 于 马尔 可 夫 链 的 状态 i, 正 整数 集 {fn Si 
py? > 01 的 最 大 公 因 子 d, 称 为 状态 ; 的 周期 ,车 a, > 1 称 状态 i 
为 周期 的 ; 若 d, = 1 称 状 态 i 为 非 周期 的 。 

定理 2.1.8 若 ir*j), 则 ;与 有 相同 的 周期 。 

证 明 hic; A lyn 1, fp? > 0, pi? > 0, 
于 是 


pit => p? + p™ >o, peP ph. pO > 0 
假定 di Sd, 分 别 为 i 与 j 的 周期 , 则 (4 + 5) 同时 可 被 d; Md, 整 
除 。 车 pir? > 0, 则 
pitata) = pP . py” . py > 0 
(L+ m+ n) Rd, BRM m 也 可 被 d; 整除 ,从 而 4 可 被 d， 
整除 . 同 理 q TR d, 整除 ,于 是 d; = djo 
定理 2.1.9 若 马 尔 可 夫 链 是 不 可 约 的 , 即 所 有 状态 之 间 互 
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通 , 且 存 在 j ON ,fË p; > 0, ie Ed: J Ke E BE: AK 
RMF ,存在 平稳 分 布 。 
证 明 Fp, >0,W 2 = 1。 由 定理 2.1.8 知 ,所 有 状态 周 
期 均 为 1。 由 于 对 于 任意 状态 i ,i>j ,存在 n, 和 nj poe > 0, 
bin > 0, Fb 
pret > 0 
同时 有 
Bye > pip by p p > 0 
取 No = maxin, + n; i, SN}, £ > No BF pi) > 0(; , < 
N), TÆ pP >O > No), P 为 本 原 随机 和 矩阵。 根据 定理 2.,1.7 
马尔 可 去 链 存 在 平稳 分 布 。 
E 2.1.10 非 周期 不 可 约 有 限 状 态 的 马尔 可 夫 链 的 转移 
MINER PEPE 
证 明 设 P 为 转移 矩阵 ,不 可 约 的 , 则 所 有 状态 是 正常 返 的 ， 
而 且 是 互通 的 。 若 P AFAIK, 则 对 于 任意 i SN, In Z 1; 
pS? > 01 MWRACH THI. FREE n, 5 n>n tty” >0, 
到 M = maxi n,} Mn > M 时 ,对 于 任意 i < N # pl? > 0。 由 
于 io; FETE n, 使 py > O.F Rn SMA, po? > OR 
K = M + maxi nj, | 
则 对 于 任意 i,j GN RE k SK BA py > 0. FE PEAR 
PEDLER 2.1.7 知 ,P 存在 平稳 分 布 。 
定理 2.1.11 车 齐 次 马尔 可 去 链 转移 矩阵 P, 对 于 任何 初始 
分 布 x, 有 极限 分 布 
lima" P" = =". 
则 极限 分 布 x EP 的 平稳 分 布 。 
证 明 ”由 于 
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g P = g' PP 
则 
= limg"P"' = (lim(q'P"))- P = x'- P 
得 证 。 
由 于 ;为 非常 返 状态 时 ， Sop < 0°, FRE lim py” = 0.# j 
为 常 返 状态 时 且 是 非 周期 的 ， 则 有 


(n) = 1 


my 


于 是 对 零 常 返 状 态 j Ai lim p; = D.H F 
= 2 pP 


N n 
=< > mp ™ + 2 £ 
S n -—= co , FES N — co MS £ AER ER SRUETIE4R2SOH 


lim py Pos 


于 是 对 于 有 限 状 态 的 马尔 可 夫 链 不 可 能 存在 零 常 返 状态 。 对 于 非 
周期 的 正常 返 的 状态 k A 


Sees (aad =< py? =< x Je + Dyer” 


普 先 令 n- OO FN eo limpi = L RX = 1, 
8 


lim P; 


(m) 一 1 


mua 
定理 2.4.12 对 于 不 可 约 非 周期 的 马尔 可 夫 链 有 极限 分 布 
limP{X, = jl = z; = —- 


B 


lim n Pa 
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此 极限 分 布 与 初始 分 布 无 关 。 
证 明 由 于 
limP1X, = j| = lim Dapy 
— , 1 
= > lim ps = ay Da = m; 
则 证 。 
定理 2,1,13 假定 马尔 可 夫 链 仅 有 一 个 正常 返 类 C, 则 妆 
;) € Ch 
| lim P| X, = jl = x; 
AH; & Caf 
lm P| X, = jl = 0 
证 明 “利用 定理 2.1.12 DE. 
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假设 S = 10,1 为 个 体 空间 ,S* 为 种 群 空间 ,S?: 为 母体 空 

BJ. x, € S(i < N) 是 NN 个 个 体 , 则 
X = CX, ,KN ) 

是 一 个 种 群 。 用 XO 表示 初始 种 群 ,X(n) 表示 第 n 代 种 群 。 用 
/:S>R' 表示 适应 值 函数 , 则 标准 遗传 算法 的 过 程 为 : 

(1) 对 于 n = 6 给 出 初始 种 群 X (0); 

(2) 对 于 第 n FEX) 中 按 以 下 分 布 独立 地 选择 N 个 母 
体 : 

P|T,(X(x)) = CY, Y9) 


FY) FY YA > sF. 
KEXEN 


= (PYP € Ra) (2.2.1) 
0， EN 
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其 中 上 = 1— N. 
(3) 对 (2) 中 选择 的 N 个 母体 进行 单 点 随机 杂交 , 即 
PIT.(Y®, Y) = Xn + 1)! 
kp./l, Klint DYP 
B Xat D) = AYP + (I — ALY 


+t) y” 
0, 其 它 
(2.2.2) 
其 中 pp. 满足 0 过 p 所 1, 记 .是 杂交 概率 ,4 是 一 个 对 角 线 矩阵 ,前 
> THARA 1 而 其 它 元 素 为 Oor 称 为 单 点 杂交 的 杂交 点 。 
(4) 设 变异 概率 为 p, ,通过 

X (n +) = Kn +1) e, Xun + 1)) 
产生 

X(n + 1) = CX n+) ,Kn + 1)) 
满足 概率 : 

PI|T,(X,(n +1)) = X,(n + 1)! 


= AN, DN a) (1 一 户 pi FOG (a+. X CHT C p =< N 


(2.2.3) 
(5) 如 果 注 足 停 止 准则 , 则 停止 ,否则 转向 (2)。 
记 
T = T, ° T. ° T, 
则 标 谁 遗 传 算法 为 : 
X(n) = T(X(n -1)) = T, ° T. ° T,(X(n — D) 
(2.2.4) 


M X(0) 出 发 , 即 得 到 种 群 序列 | 六 (nn);n Ole 
定理 2.2.1 标准 遗传 算法 的 种 群 序列 | 芝 (w);n 20) 是 有 
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限 齐 次 不 可 约 非 周期 的 马尔 可 去 链 。 
证 明 由 于 S = 10,1)' 中 有 2' 个 个 体 , 则 种 群 空间 SN 中 有 
2% 个 个 体 ,S* 为 种 群 序列 的 状态 空间 ,是 有 限 的 。 由 于 
X(n +1) = T(X(n)) = T, ° T. ° T,(X(n)) 
其 中 T. , T. , T. EJ tsa BK, A X(n + 1) 15 X(n) 有 关 , 即 
IX (n): 0! 是 有 限 状态 的 马尔 可 夫 链 。 由 于 
P|C(T(X(n)), = X(n + 1)| 
= 3 > PIT,(X(n)] = (Yf? (n), 
yor bes PP oy nes 
YS? (ai PIT (Yi On), Y Cn)) = Xn +1)1 
- PIT (X(n + 1) = X,(n + 1)! (2.2.5) 
及 对 于 任意 K) € N, HEEP a), PPO) € SE 
Xin + 1) 使 得 
PITAX(n)) = (YG) Yo >0 (2.2.6) 
PIT CYP (n), YY" (ny) = X (n +T) > 0 (2.2.7) 
MEE X (2 + DRX + DA 
PÍIT,(X,(n +1)) = X, (a + 1)] > 0 (2.2.8) 
于 是 
PI(T(X(n))), = Xn + >O (2.2.9) 
H sh (2.2.1), (2.2.2) 及 (2.2.3) 知 式 (2.2.6), (2.2.7) 及 
(2.2.8) 与 n 无 闫 ,从 而 式 (2.2.9) 也 与 n 无 关 。 从 而 
PIT(X(n)) = Xa +1)! 


N 
= J|PICT(X(m)), = X,(n +1)] > 0 
k= 


BS H LE, 
PALA EIERE A, EREA E IREA X Oin 201 
是 SN 上 的 齐 次 不 可 级 非 周期 的 马尔 可 夫 链 。 
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定理 2.2.2 ”标准 遗传 算法 的 种 群 马尔 可 去 链 序列 | 其 (n)3 
n=O} 存在 极限 分 布 。 

证 明 ”由 定理 2.2.1, 标 准 遗传 算法 的 种 群 序列 |XX(n);n > 
0! 是 存 眼 状态 不 可 约 的 非 册 期 的 齐 次 马尔 可 夫 链 , 根据 定理 
2.1.12 知 

lim PIX(n) = Y! 

.= lim 2 PIXO) = Y/X(0)}P1X(0)} = =(Y) 
X€ 
则 x(Y) 是 S 上 的 分 布 , 且 
S) r(Y) PIX ía) = Z/X(0) = Yi = z(Z) 
ye s 

定理 2.2.2 BABA Aro ith He EY BRE Kal k ot RL y hk a 

的 , 它 不 依赖 于 初始 种 群 的 选择 , 即 

z(Z)= lim PiX(x) = Z/X) = Y} (Z € ss) 

假定 了 是 S 上 的 适应 值 函 数 , 记 

M = |X; € S f(X) = max f(X)| 
# Y r M = @ ,NWl 

lim PX (a) N MZ Ø/X 0) =Z]<1-x(Y)<1 
BU ARAB ARIE , 4 n OOM X(n) MA Z irina E wi 
能 保证 得 到 全 局 最 优 智 。 

恒 是 ,由 于 标准 遗传 算法 的 状态 空间 是 正常 返 的 , 它 以 概率 1 
ARE LX (nin 0 可 以 达到 Sn 中 任何 状态 无 限 多 次 ,特别 对 于 
X € M ,也 可 以 到 达 无 限 多 次 ,从 实用 的 角度 来 讲 也 是 有 效 的 。 

在 定理 2.2.1 和 定理 2.2.2 中 使 用 单 点 杂交 ,事实 上 适合 于 
任何 杂交 方式 。 

下 面 我 们 进一步 研究 标准 遗传 算法 在 种 群 转移 过 程 中 遗传 因 
子 的 变化 规律 。 记 

PIX,y) = Pix,(n+1)= x, ZX(n) = Xi», = 0,1) 
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其 中 
x = (X, Xy) €E s~ 
X, = (zarr) ES (; =< N) 

称 PiX, yi 为 给 定 芝 时 ,后 代 个 体 的 一 维 边 际 分 布 , 令 


É = |í < N; x, = 1| 

= lis N; x; = 0] 

A (X) KX) = BAX 
Er 

f (X) = ZX) = Bye 
ex, 


F(X) = SX ) = A(X) + P(X) 

JERE 2.2.3 BARC): = > Ü| 为 采用 单 点 杂 LE BEF AR HE 
遗传 算法 的 种 群 序 列 。 给 定 半 (x) = XE REX (n + 1) 的 
S$ AAE z (n + 1) 服从 参数 为 p (X ,1) 的 0 - 工分 布 ,其 中 

pb (K,1) = Plzxy(n +1) = 1⁄X(n) = XI 


AGO AX) 
+t ~2— 3 | (2.2.10) 
F(R) F(X) 
证 明 $ 
Y = (yy) = TAT AX) 
则 
Plr;(n + 1) = 1/X(n) =X} 
= Ply, = 1/X(n) = XI - (1 - p,) 
+ Piy, = 02X(n) = X! ° pa (2.2.11) 
而 


Ply, = 1/X(n) = X] 
= PLY = T.(T,(X));y; = L] 
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= SOSMPIT.AX,.X,) = Yay, = l| 
us N u N _ 
> PIT,CX) = (X, Xa) 
id 


A, = É x F,, A, = P x F, 
Ay = PP, x Th, A, = É, x F, 
于 是 Nx N= A,U A,U A; UA LW 
B= $) PIT.(X.,,X,) = Yy = 1| 


t be A, 
PIT(X}= (KX,X) GZA 
于 是 
Ply, = 1⁄X(xn) = X] = B, + B, + B; + B, 
furv) € A,B T (X. , X.) = Y Py, = 0, FEB, = D, 
S(u,v) € A, HL T. (X. ,X.) = Y Py = 1, TE 
Bi = >) PIT,(X) = (X.,X.)| 


(WE A, 
_ f(x.) /(x,) 
ta, (FOX 
Huv) E A; 时 ,由 于 wwE hove YBa, = 0,z, = 1, 
于 是 杂交 必须 在 7 分量 之 前 进行 才能 使 y = 1, 于 是 
jpe FX OFK) 
oTa (FX) 
(usv) €C A; 时 ,由 于 uw € hve R, B = i,z, = 0, 
于 是 要 使 ”= 1, 必 须 满足 下 面 两 种 情形 之 一 : 
(a) 杂交 在 j 分 最 之 后 进行 ,这 时 不 管 是 否 杂 交 均 有 y = 1, 
于 是 


B, = 


PIT,(X,,X,) = yoy = 11 = ‘7 
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(b) RZE y 分 量 之 前 进行 ,但 事实 上 未 杂交 ,于 是 
P|T.(X.,X,) = y,x =U = +G p) 
从 而 
B= >; (H + La - p>) 


tu. wlE A, i 
:PIT (X) = (X.X) 
yee 


- Sv -Lp 一 
> ( (FX 


rb. 
te wWEA, 
综合 上 述 结 果 即 得 
Ply, = 1/X(n) = XI = B, + B; + B, 


(> f(x.) 
zer, N f(X,)f(X, ) 


(F(X) Ta (FOX): 
_ pues É P(X) [ 2 
FOXY) GD F(X) 
_ f (X) 
F(X) 
FX (2.2.11) 即 得 式 (2.2.10)。 
定理 2.2.4 BX); n Z 0] 是 采用 均匀 杂交 牌子 的 标准 
遗传 算法 的 种 群 马尔 可 夫 链 , 则 
Ply, = 1/X(n) = x} 
AD | Í » AD | 
FX) GA)” 
证 明 利用 定理 2.2.3 中 记号 有 
Ply, = 1/X(n) = XI 


(2.2.12) 
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f(x )f(X) FOX FOX) 
+ op) 


Ss (FOX) RR (FOX) 
a FXO) AR) 
wia, (T(X)): Pe = F(X) 
则 证 。 
推论 2.2.1 HX (Cn) sn Ol 为 标准 遗传 算法 的 种 群 马尔 
可 夫 链 ,而 
AX) = Alia) 0 =< k < K] 
WE X 的 最 小 模式 ,对 于 a, = 1(k < K) 时 有 
Ply, = 1/X(n) = X] =1 — p, 
4a = 0(£ < K) 时 有 
Ply, = 1/X(n) = Ñ! = p, 
证 明 Fo, = Lat fe (X) = (CX), a, = 0W f (X) = 
0, WE. 
下 面 研究 p. = 0 情况 下 的 标准 遗传 算法 。 
定理 2.2.5 ”假定 1X(n);n > 1 是 标准 遗传 算法 的 种 群 马 
RTRS, pn = 0,X(9) = X, HUF RE: 
(1) 对 于 任意 Y € AX) ,存在 n 0, RS 


PLY € X(n)/X(0) = X,] >0 (2.2.13) 
(2) OPER Y & AX,) l n SOF 
PLY € X(n)/X(0) = X,} = 0 (2.2.14) 


其 中 AX.) HOS X, 的 最 小 模式 。 

证 明 (D OE V = (y, E€ AX,) A 
X, ta Tp U Fy 
Xo = : 


Xn 


TN TN U ON 
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用 ACX,) 和 B(X,) 分 别 表示 X, 的 多 样 度 与 成 熟 度 。 我 们 可 以 假 
设 
ARO = Ha ds TAK) 
= (a, eda rN ¥ ttt, * 》 
于 是 对 于 任意 j < X(X,) 有 
<; = y; Gi = N) 
显然 对 于 任意 了 > BCX) + 1 Ry AEX, 中 的 个 体 r， 使 得 
x; = Yo 
下 面 用 归纳 法 证 明 (1)。 设 1(X。) = ! -~ 2, 也 即 有 BCX) = 
2.0 FEE < N. < ¿ - 2 fi x, = 9, AINE p, 
q < N, ARS X, (0), X. (0) BX, 的 个 体 , 且 
Tein = Mets Ty = y, 
令 
Z = (Zi. Zp) 
Mt FE i >= pO < N) Z, = X,(0),Z, 利用 X,(0) 和 XX, (0) 
在 第 ! 个 分 量 上 杂交 产生 , 即 
Z, = (Loto Zp» Le) = Y 
利用 选择 算 子 与 杂交 算 子 的 性 质 即 得 
PLY € X()X(0) = Xt > PIX) = Z/X(0) = X,! 
F(X, OY | i x, ` F(X (0)) 
=, (X AXO) ) (YAY 
> ü 
对 于 p(X.) = 2 的 情况 证 明了 式 (2.2. 10)。 
现在 假定 式 (2.2.13) 对 于 X) = m - 1 是 正确 的 ,考虑 
B(X,) = m 的 情形 。 那 么 我 们 有 


= 
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ry — y, (¿=S N,; <i — m) 
以 及 存在 | = ig < N) 使 得 Eai = y, oR 
ZG) = (Z,, Za 
其 中 
Z, = (Zi. Liem) Ley Md 
FH Y = Z, € KZD) PZO) = m ~ 1,A(Z01)) = 
L- m+ lo T (Z(1)) C 4X(0)), 于 是 由 归纳 假定 及 马尔 可 
夫 链 的 齐 次 性 担 到 
PIYE X(n)/XU) = Z()1 > 0 
进一步 利用 遗传 算 子 的 定义 有 
PIXO) = Z(1)⁄X(0) = XI 
(X,)/(X, ) (X, )° 
p. FOXOSF 2]. = ,) | >。 


ü mi, Í ~ 2 x 2 
e (EI) > (x,)) 
于 是 和 
PLY € X(n)/X(0) = X,Í 
> PLY € X(n)/XG) = ZG)! 
PIXO) = Z(1)/X(0) = Xp} > 0 
(2) 由 假定 Y & AX,), w 
PLY € AX,)/X() = Xf = 0 
设 AXo) = Aa, oa, ], = X(N。), 对 于 选择 算 子 与 杂交 算 
于 不 可 能 改变 i, +i, 的 基因 分 量 a,,…,a; ,于 是 对 于 任意 
YEAX)A 
PiX(k +1) CAX,)/X(A) = Yl = 1 
由 于 总 € AX), FR 
P{X(n) C MX,)/X(0) = Xo} = 1 
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联合 以 上 证 明 即 得 ,对 于 Y & v(X,) 有 
PLY € X(2)/X(O) = Xo} 
<PLY € AX), Xa) C AX,)/X(0) = Xel 
= PLY € AX,)/X(0) = X,1 = 0 
AE. 
定理 2.2.5 指 出 了 在 没有 变异 的 情况 下 ,标准 遗传 算法 的 搜 
索 范围 为 VO 个 个 体 。 多 样 度 A(X,) 表征 着 搜索 空间 的 大 小 ， 
AXO 越 大 搜索 空间 越 大 。 特 别 当 ACK) 为 0 时 没有 什么 搜索 能 
力 。 
定理 2.2.6 BiX(n)in 2 0| 是 标准 遗传 算法 的 种 群 马尔 
可 夫 链 , pn = 0,H 是 齐 次 种 群 全 体 , 即 
H = ((X,",X);X € S} 
WEEE nls 
P1X(n) € HO € Hi = 1 
证 明 WEB X C H,z(X) =X BMY 里 时 ,由 定 
理 2.2.3, 对 于 任意 n > 1 UA 
P|X(x) = YX) = XI = 0 
于 是 
P{X(n) & H/X(0) € HI 
= SPIX(n) = Y/X(0) € H| 


EH 


_ <a PIX(n) = Y,X(0) € H| 


fen P{X(0) € H| 
PIX(n) = ¥/X(0) = XI PIX(0) = X| 
= 之 2 z 
YéHX€H PixX(0) & H! 
=0 


从 而 
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PiX(n) © H/X(0) € Hl = 1 
定理 2.2.7 WIX(n)in 2201 是 标准 遗传 算法 的 马尔 可 夫 
op, = 0, 王 为 齐 次 种 群 , 则 有 
(1) {XCn)sn 六 0 以 概率 工 收敛 到 五 , 即 
mP|X(a)€ H| = 1 
(2) 18(X(n));n Z 11 DORE 1 单调 不 增 , 即 
P{B(X(n +1) S B(X(n))} = 1 
(3) IR Gaan Z 11 ERRA, ED 
PIRR n + 1)) <ARG> 
(4) ROX ain 22 LLP AB 0, 即 
Pllimp(X(n)) =0}=1 
证 明 (1) 如果 X(0) € 五, 由 定理 2.2.6 则 证 。 下 面 假定 
X(0) = (Xiro, X.) & Heid 
PIX,Y} = PIX(n +1) = ¥/X(n) = X} 
PIX,H} = SIPIX, YI! 


Ye H 


则 
PIX,HI > PIŠ (a + 1) = (Xo) XK (n) = X} 
= >| 一 | >0 
CS FOG) 
eel 
i 


a=minfPCY,H); Y & H} 
则 0 < a < L.XFT 

T = min|# > 1: X(#) € H| 
Ffilk =14 
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PIT=kl = $) PIX.YIPIY,, Yat -Pt¥ H} 
车 A 
= (1- ay! 
FR 
ET) = Dk- IT = I< Sea) = <° 
Am PiT < eo] = 1, 即 得 
lim P1X(k) € Hi = P]T < of} = 
(2) 由 于 AX) BS X 的 最 小 模式 , 则 
P|8(X(k +1)) S BCX) 
= SIP|A(X(t + 1)) S B(X(R))/X(&) = X! 


XE _ _ 
+: PIX(k) = X! 
> PIX +1) € ILA XG) = XI 


XEN 
-P\X(kh) = Xt =1 


(3) + X € SNF 
P|A(X(k +1)) < A(X)ZX(k) = X| 
= Pip(X(k + 1)) < p(X) ~1/X(k) = X! 
> Pip(X(k +1)) = 0/X(k) = XI 


> (X, WADDY ) >0 


类 似 于 (2) 可 证 
PIB(X(k + 1)) < AŠ > 0 
(4) H(t) 及 
Pi lim @(X(4)) = 01> P {lim XG) € HI = 1 


则 证 。 
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2-3 改进 遗传 算法 的 马 氏 链 模 型 


从 定理 2.2.5 可 以 看 到 ,在 标准 遗传 算法 中 杂交 算 子 有 了 能力 
搜索 包含 当前 种 群 的 极 小 模式 中 的 所 有 个 体 ,但 是 它 也 仅 限 于 此 。 
此 ,只 有 当 种群 的 多 样 度 越 小 时 ,包含 种 群 的 定义 长 度 越 大 ,从 
而 包含 当前 种 群 的 极 小 模式 包含 更 多 的 可 行 解 种 群 。 当 前 种 群 的 
多 样 度 越 大 ,杂交 算 子 的 搜索 能 力 越 强 。 如 果 初 始 种 群 的 极 小 模式 
包含 全 局 最 优 解 , 则 标准 遗传 算法 有 可 能 搜索 到 全 局 最 优 解 。 同 时 
从 上 节 的 定理 2.2.6 与 定理 2.2.7 又 可 看 到 ,无 变异 的 标准 遗传 
算法 总 是 收 化 的 ,而 和 且 其 收 合 性 在 成 熟 度 意义 下 还 是 单调 的 。 然 
而 ,我 们 也 注意 到 ,作为 标准 遗传 算法 收 合 的 极限 ,可 以 是 全 局 最 
优 解 ,也 可 能 是 局 部 最 优 解 ,还 可 能 是 非 极 值 解 。 这 就 揭示 了 杂交 
算 子 的 二 重 性 。 它 既 可 以 强迫 算法 收 合 ,而 又 可 能 使 算法 过 早 终 上 
到 非 最 优 解 。 这 种 现象 称 为 遗传 算法 的 早熟 现象 。 


定义 2.3.1 称 种 群集 A = Ha. C S" 为 早熟 集 , 若 对 于 任 
& X € A mi <N BH PIT ATR), € A;,l = 1, 


显然 Sv 是 最 大 早熟 集 , ][ 1 X1 为 最 小 早熟 集 。 
rel 


定理 2.3.1 # A = H A, HERE, DAA, SAG JS 
N). 
WEHA 对 于 任意 X € 4 , 取 
X = (KX XN) € A 
则 
f (X .) 
(ZADY 


PITATA(X)), = X,] > > 0 
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由 定义 2.3.1 则 证 Ay cC A. 同样 可 证 A, Cc Ajo 则 证 Ay = 
A,(i =< N). 

定理 2.3.2 BAXAX x AA 为 早熟 集 , 则 及 必 为 包含 A 
的 极 小 模式 。 

证 明 2 (A) ABS A RDA WA CHA), F tuk 
YA) CALWX € ZA), A BB FEE S AA CA), BREW 
B(A), 相应 地 极 小 模式 为 Xa a, A) M V1 < k < 
MA) 48 x, = ay ;其 中 x; AX Bi, TD E, ROE I = 
41,221 \ Line's Dea) | 38 i 重新 编号 ,并 记 作 六 sd20 dpa) to 
BR VISESA) BFE Y, E A fs, = z, ,其 中 心 为 X 
的 ji 基因 分 量 。 取 

Y, = (YYz，…， Y) 


则 
PIT.(T,(Y,)) = Yui >0 
Rt Y, RAY, 与 Y, 在 分 量 ;, 外 杂交 所 得 个 体 ,于 是 Y. € A. 
A 
Y; = (Yo, Ya.7, Y3) 
w 
PiT.(T.(Y,)) = Yal > 0 
Yo 表示 Yu FEY; 在 分 量 j; 处 杂交 所 得 个 体 , 从 而 Yu € A, H. 
Yo 与 X 0... ji 分 量 已 经 相同 ,递归 下 去 直到 BCA) 步 , 则 
Yaa € A, B Yuen SX BJ ji,jz U jeta) 分 量 均 相同 ， 
Yi aca = X.MU X € 六, 从 而 HA) Cc A ,结论 得 证 。 
遗传 算法 的 早熟 现象 导致 这 早 收 敏 。 下 面 进 一 步 研 究 导 致 过 
BKK RE, 
定义 2.3.2 ”对 于 种 群 序列 | 又 (naj;n 2 01, BAT n 
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d,(X(n)) =0 即 ri 二 N) 或 (2 一 0, 称 种 群 序列 
Ej 基因 上 过 早 收 敏 。 若 da) = 0,8 2. (X(n)) = 0,G < 
1) PRPS BK, 
PPA EARS Xn) 是 齐 次 种 群 , 因而 等 价 于 
A(X(n)) = 0, _ 
ES 2.3.3 对 于 种 群 X C S", ËR 
,. PO) A(X) 
) = —, b. (X) = =s-, 
J(X) f(X) 
分 别 为 分 量 j 处 0 等 位 基因 和 1 等 位 基因 个 体 的 适应 比 。 
定理 2.3.3 HiX(n)sn > 0] 为 标准 遗传 算法 的 种 群 马 尔 
可 夫 链 ,0 < p, < 1, 则 对 于 j; 志 1 有 
Pla(X(n+1)) = 0/X(n) = X| 
= (a,(X) + (1 - 2a,(X))p, )" 
+ (6, (¥) + (1 - 26,(X)) p,)% (2.3.2) 
证 明 (REM 2.2.3 知 
Plr; (n +1) = 1/X(n) = X| 
= 6,(X) + (1 - 26,(X))p,, 
Plz,(n +1) = 0/X(n) = X! 
= a,(X) + (L-2a,(X))p, 
由 于 (Xi(n + 1D Xv +1)) RE XC) 相互 条 件 独立 ,于 是 
Pla(X(n + 1)) = 0/X(n) = XI 
= Pl|z,(n +1) = 0 G < N)/X(n) = XI 
+ P|z;(n + 1) = 1 (ü N)K(n) = X] 
= [a, (X) + (1 - 2a, (X))p,, I 
+ [6, (X) + (1 - 25, (X))p,,]` 


a 


(2.3.1) 


d 


则 证 。 
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推论 2.3.1 对 于 p, = 0 的 标准 遗传 算法 的 种 群 马尔 可 夫 
EIX a)n 2 0] 有 
Pla,(X(n)) = O/X(n) = XI 
= a (X) + bX 
证 明 由 定理 2,3.3 取 >, = OB. 
推论 2.3.2 FIX (a) 2 2 0] 为 标准 过 传 算法 的 种 群 马 尔 
可 去 链 , 记 
g(X.p,.N) 
= (a, + (1 - 2a;)p,)* + (b, — (1 - 26,)p,,)* 
= (a, + (1 —2a,)p,)* + (1 — a, + (1 - 2a;) p,, )` 
HP a, = a (X),5 = 6,(¥) = 1 - aog HREX(n) = X B, 
X(n + 1) 在 分 量 ; 处 过 早 收敛 的 条 件 概率 。 则 5 关于 NN 单调 降 ， 
关于 | p,, - 1⁄2] 和 ja ~ 1⁄2| 单调 增 ,特别 当 N 固定 时 ,g HE pn 
= 1⁄2,a, = 1⁄2 时 达到 最 小 值 。 
证 明 ”由 于 
Oa, + (1 ~ 2a,)p, <1 


at g 关于 NN 单调 降 。 令 a = a, + (1 - 2a,)p,, , W 
经 = Na (4 -2p,,.) — NG -aY (1 — 29,,) 


= N(1 - 2p, (a! — (1 — ay) 


tate 04a; < 1⁄2 

da; = 0, 12 = a s 1 

ENN 0<p, < 1⁄2 
= 0, 1⁄2 < p,, < L 
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定义 2.3.4 K F(X) = maxi f(X; h i < NI WX = 
(X... Xn ) 的 种 群 满意 值 。 称 
= {X;F(X) = maxi AX XESH 
为 满意 种 群集 。 
改进 的 标准 遗传 算法 有 以 下 的 步 又， 
(1) Ez £ = 0, 选 择 初 始 种 群 X (0); 
(2) 利用 标准 遗传 算法 生成 种 群 
X (&) = T, - T. ° TARRY) 
(3) 取 适 当 的 正常 数 z ,计算 
= mir 1; ee 
A(X(k)) F(X(Ł)) 
(4) 令 。 是 [0,1] 上 均匀 分 布 的 随机 数 ,产生 新 种 群 
X (&), p= C, 
Xk +1) = RO p> G, 
(5) 若 符合 停止 准则 停止 ,否则 转向 (2)。 
定理 2.3.4 WX(n)in 0) 是 由 改进 的 标准 遗传 算 法 产 
生 的 种 群 序 列 , 则 有 : 
(1) IX(x);in 220] 是 SY 上 非 齐 次 的 马尔 可 夫 链 ; 
(2) IX in 区 0 以 概率 1 收效 到 潢 意 种 群集 M , Bl) 
lim PLX(n) € M"/X(0)] =1 
证 明 (1) 首先 ,1 区 (上 );& SO] 是 马尔 可 夫 链 是 显然 的 。 
状态 转移 矩阵 为 
PIX(k +1) = YAX(k) = X! 
PIT °T.° T(X)= Yi. C, X= Y 
fi - SIPIX(k + 1) = ¥/X(k) = X 


YX 
因此 是 非 齐 次 的 马尔 可 夫 链 。 
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(2) iu 
P,{X,¥} = P{X(k+1) = Y/X(k) = X| 
P(k) =(P, X, Yh X,Y € S*) 
HT 
1, F(Y) > F(X) 
0, F(Y) < F(X) 
则 F(Y) > FOX) 时 有 
lim PIX,Y! = PiT, > T. ° T(X) = Y] > 0 
当 F(Y) < F(X) 时 有 
lim Pi {X,Yi =0 


jim G = 


记 
P(oo) = limP(k) = (P(X, Y); X,Y € ss) 
则 
>0, F(Y) > F(X) 
=0, F(Y) < F(X) 
显然 P(ce) IERIE TE P (oo) 有 唯一 的 一 个 不 可 约 的 非 
周期 的 正常 返 类 M* SEN M ”是 非常 返 类 。 于 是 (8);k 2 01 
AR RMA XO) = 总 ,有 
lim P|X(&) = ¥/X(0) = Xo} = xz. (Y) 
BS z. (Y) = 1。 于 是 


Yes 


P(co)(X,¥) 


limP1X(&) € M’ /X(0)I = >. ma(¥) = 1 
则 证 。 
定理 2.3.4 指 出 ,改进 的 标准 遗传 算法 的 关键 是 利用 C, 进行 
了 控制 -而 C, 是 由 多 样 度 和 种 群 满意 适应 值 决定 的 。 经 过 改进 的 


标准 遗传 算法 ,或 者 种 群 满意 值 变 大 ,或 者 种 群 多 样 度 变 大 ,都 可 
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以 使 Cy 变 大 。 也 就 是 说 ,改进 标准 遗传 算法 的 过 程 ,或 者 增加 种 群 
满意 值 ,或 者 增加 种 群 搜索 范围 。 当 种 群 变化 的 过 程 增加 时 ,增加 
搜索 范围 作用 越 来 越 小 ,而 增加 种 群 满意 适应 值 越 来 越 重要 。 因 此 
在 定理 2.3.4 中 取代 C, 为 
| J EKL 
G = mim 1; | ———— 
F(X] J 
同样 成 立 。 


2-4 ”优胜劣汰 遗传 算法 的 马 氏 链 模 型 


杰出 者 遗传 算法 是 另外 一 种 改进 的 遗传 算法 。 在 标准 遗传 算 
法 中 取 N 对 母体 进行 杂交 后 变异 产生 新 一 代 种 群 -而 杰出 者 选择 
遗传 算法 是 取 (N - 1) 对 母体 进行 杂交 后 变异 生成 下 一 代 种 群 的 
(N - 1) 个 个 体 ,而 最 后 一 个 个 体 取 原 种 群 中 适应 值 最 大 的 个 体 ， 
这 种 收 正 保证 了 种 群 序列 满意 适应 值 的 单调 不 减 性 。 

假设 S = 10,1 为 个 体 空间 ,SN 为 种 群 空间 ,S? 为 母体 空 
间 。 用 | 六 (nn );n 220] 表示 种 群 序列 , /SS -> R° 为 适应 值 函数 , 则 
杰出 者 选择 遗传 算法 的 过 程 为 : 

(1) 对 于 = 0 给 出 初始 种 群 基 (0); 

(2) E X (a) 中 独立 的 选择 (N — 1) k YA, Y), JE 
Ħk=1~(N-1); 

(3) 对 于 (2) PREN- DOARP, YP) (ESC N- 1) 
进行 单 点 杂交 得 到 (N - 1) FA ik X) Cn + 1), Xue (n + 1), 38 
过 变异 产生 CN 一 1 个 个 体 X (n +1) e, Xa i (m + 1), 

(4) 计算 F(X(n)) = maxl f(X, (n) SNIE 

f(X,) = F(X(n)) (2.4.1) 
即 
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iy = arg maxi f(X,(n))1 (2.4.2) 
则 X.,(n +1) = X, (nn)。 于 是 产生 下 一 代 种 群 : 


X(n +1) = (X Cn + 1), Xa I (n + l), 
Xy (n +1))7 
(5) 若 满 足 停机 准则 停 上 ,否则 转向 (2)。 
在 杰出 者 选择 遗传 算法 中 使 用 的 选择 算 子 .杂交 算 子 ERS 
子 与 标准 遗传 算法 相同 。 于 是 杰出 者 选择 遗传 算法 可 以 记 为 
X(n +1) = Xt = The The T (X(n)), 
(G =< N- 1); 
X,(n + 1) = X, C n)) (2.4.3) 
其 中 i, 满足 式 (2.4.2)。 
定理 2.4.1 ”杰出 者 选择 遗传 算法 种 群 序列 ! 关 (n);n > 0] 
大 有 限 齐 次 马尔 可 夫 链 。 
证 明 ”首先 由 于 式 (2.4.3) AX + DRS X(n) 有关。 因 
WAX (Cn) sn SO} 是 有 限 状 态 的 马尔 可 夫 链 , 且 转 移 概率 为 
P|X(n +1) = ¥/X(n) = X} 
N 
TPIT), = Y,!, 
一 存在 ig € M(X) fŠ Yy = X, (2.4.4) 
0, ”否则 
其 中 
M(X) = li; f(X;) = maxi f(X;)11 
TE PIX(n +1) = YZX(n)] 5 n 无关 ,因而 是 齐 次 的 ,转移 概 
率 可 记 为 
PIX.Y! = PIK(a +1) = ¥/X(n) = X|] (2.4.5) 
EM 2.4.2 ”杰出 者 选择 种 群 马尔 可 夫 链 序列 | 关 (n);n > 
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O} 以 概率 1 RE SRR M ”的 子 集 M; : 
Me = [Y = (Ye, Yy); YE M| 
Bp 
lim P{X(2) E MI /X(0) = Xo = 1 
证 明 ”不妨 假定 X 是 f(X) 的 唯一 最 大 值 解 。 由 式 (2.4.4) 
及 式 (2.4.5) 知 PIX, Y) SEM: 
(1) 354 X,Y € Mi 时 ,PX,Y} >0,PIY,X1 > 0, 即 
X=Y 
(2) 59 X € Mi ,YE MI H,PIX,Y}=0,0 X — Y. 
于 是 M; 为 正常 返 的 非 周 期 的 不 可 约 闭 集 ,SA M; 为 非常 
返 的 状态 集 。 于 是 _ 
limP|X(n) = Y/X(0) = X,! = ee € Me 
nore 0, Y & Mi 
于 是 
limP|X(n) € MI /X(0) = Kl = 1 
定理 2.4.3 ”对 于 杰出 者 遗传 算法 马尔 可 夫 链 序列 的 种 群 满 
意 值 序列 是 单调 不 减 的 , 即 对 于 任意 nn 之 0 有 
F(X(n)) < F(X(n + 1)) 
证 明 由 于 杰出 者 遗传 算法 中 取 
Xy(n + 1) = X. (n) 
其 中 io = arg max! ACX (n))1 , 
F(X(n)) < F(Xy(n +1) < F(X(n + 1)) 
杰出 者 选择 遗传 算法 与 标准 遗传 算法 ,对 于 下 一 代 种 群 前 
(N - 1) 个 个 体 取 法 相同 , 仅 是 最 后 一 个 个 体 取 法 不 同 。 这 样 对 于 
标准 遗传 算法 的 基本 性 质 仍然 成 立 。 对 于 pa = 0 时 可 得 到 下 列 定 
理 。 


Hla wee PEM C 8 Ri Lis 


定理 2.4.4 对 于 p= 人 0 的 杰出 者 遗传 算法 有 : 
OF YE AK D BEE n > 0 使 得 
PLY © XXD = Xa > 0 
(DUE Y & AX) Ae > 0 # 
PLY € X(n)/X(O) = X, = 0 
(3) 对 于 代 意 nn Sl # 
PXtny © H/X € H! = 1 
(4) SRE ACX Cn) an 2 U 以 概率 | 单调 不 增 , 即 
PIA a + D) LAX = 1 
(5) 多 样 座 14(X(n));n 22 11 以 正 概率 单调 碱 , 即 
PlaA(XCn Fly < ACX(n))| > Ü 
(6) EERE IA (Cn) sn D> 11 以 概率 1 tao, Bp 
Pilim ACXGr)) = OL = 1 
证 明 ”对 于 杰出 者 遗传 算法 AM XG ,计算 
in = arg max! fCX, (m1))i 
取 选 择 算 子 为 
PITH Kin) = (X0), X (n)) = 12>0 
TSAN-HD 采 用 标准 遗传 算法 的 选择 算 子 .于 是 原 定 理 2.2.3 
和 定理 2.2.4 证 明 均 成 立 。 


一 个 体 的 产生 采用 了 强制 性 选择 ， 

与 杰出 者 选择 遗传 算法 相反 的 是 稳定 态 遗 传 算法 。. 它 是 用 -- 
对 母体 产生 的 个 体 去 代替 原 种 群 适应 值 较 小 的 个 体 . 如 果 杰 出 者 
选择 遗传 算法 采取 了 "优胜 ”的 策略 ,那么 稳定 态 遗 传 算 法 则 采用 
TRIK” RK. 

Rae AAR IAA BRIE F: 

(1) Fin = 0, 随 机 产生 初始 种 群 XO = (X, (0),--, 
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Xy(0)) € S. 
(2) WX Cn) hiki K(X, (n), X (n)) REA 
变异 产生 一 -个 新 个 体 X (n + 1) 
(3) 按照 以 下 概率 
f "(X Gi) ` 


PIT GY = XQ) NIX) = — 
SDF (X, (n)) 


k=l 
删 去 某 一 个 体 X (n) 用 Xe + 1) 代 之 ,得 到 新 的 种 群 
X(n +1) = (X ,(n + 1), Xy (m + 1)) 
(4) 车 满足 停机 准则 则 停止 ,否则 转向 (2)。 
定理 2.4.5 ”稳定 态 遗 传 算法 是 有 限 状 态 的 齐 次 马尔 可 去 


链 ,存在 极限 分 布 。 
证 明 ic 
PIX, Y; = PIX(n +1) = ¥,/X(n) = X| 
其 中 
Y, = (Xia) e, Xa ¥ Xa do Xv) 
于 是 
PIX,YII = 3 PIT,(X(n)) = (Y,,Y;)! 
(Y y, .2y€ S° 
-PIT.C¥1,Y2) = Zl + PIT, (Z) = Y,| 
- PITE(X(n) = XODA AX 11 (2.4.6) 


@RPIX,Y1 >0 AS n XX HEART PIX Y| = 0。 于 是 
稳定 态 遗 传 算 法 是 有 限 状态 齐 次 马尔 可 夫 链 。 
对 于 任意 Y € S* iX € S" 有 
> — — + N — — 
PIX(N) = Y/X(0) = XI > || PIX,Y;1 > 0 
i=j 
于 是 P >0, 于 是 转移 概率 呈 为 本 原 随 机 和 矩阵。 根据 定理 2.1.7 存 
在 平稳 分 布 ， 
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lim P1X(n) = Y/X(0) = X = x(Y) 
由 定理 2.2.4 可 知 ,对 于 稳定 态 遗 传 算法 可 以 无 限 次 到 达 任 
何 -个 状态 。 因 此 ,“ 劣 状 "” 的 策略 不 如 “优胜 ”的 策略 。 
定理 2.4.6 ”对 于 稳定 态 遗 传 算法 采用 变量 删除 因子 , 即 
f* " (X,(n)) 


re (X (n)) 
则 稳定 态 遗 传 算法 是 非 时 章 的 马尔 可 夫 链 ， HAF Pn > 0,8 一 
co |X(n);m = 01 以 概率 1 收 伍 到 满意 种 群集 BB 
lmP|X(n) € M /k(0) = 1 
证 明 WT X,Y € SN, 有 
Pinsnt1,X,¥,) = Ð PIT) = (Y, Y) 
tY -Y.,Z) 


PITE (X(n)) = X(n) — X} 


-PIT.C¥,,¥2) = Zi- P|T, (Z) = Y,| 
-PITO G) = XDA DGH (2.4.7) 
HPY, = (Xea Xa Y, Xant u X MY AYG LN) 
Pla,wt1,X,¥} = 0 FÆlX (n); n 20 是 非 时 齐 的 马尔 可 夫 
链 。 记 
P. (X, Y) = lm Pix, n+1,X,¥} 
则 有 性 质 (2.4. 7) 及 定理 2.6 l 
>0, X€ M',Y € M` 
P a >e X&éM'.,Y € M` 
=0, X€ M" ,Y & M° 
H P.(X,X) > 0。 因 此 
P(o) = (P.(X,Y):X,Y € SN) 
具有 唯一 的 不 可 约 非 周期 常 返 类 M ,而 SN M ` 中 的 种 群 均 为 
非常 返 状态 .于 是 | 关 (n);n Z 01 是 强 遍历 的 , 即 有 


Lis 
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lin PIX(n) = ¥/X(0)} = n(Y) (Y € M’) 


HY r(Y) = 1, 78 


Y€ M 7 . 
lim PiX Cr) € M /XW):i 
= lim y PiX(n) = Y /Xt0)1 
"ye a 
= N mY) = 1 
Yr M` 
则 证 . 


我 们 知道 ,稳定 态 遗 传 算法 是 -种 * 劣 演 "” 算 法。 但 是 山 除 算 
CAITR BOR a. REK” 是 随机 的 ,未 必 能 达到 “省 汰 ” 
BJ HJ `i a 越 大 时 , 劣 尖 ”才能 真 的 实现 .因此 ,只 要 “优胜 ”可 
LAR SSA BOK” ATL OSCAR WX Gr) or De 01 BEA 
到 满意 解 集 ， 

如 果 在 稳定 态 遗 传 算法 中 采取 强迫 淘汰 制 ,-- 定 淘 法 最 差 的 
+, BIR HIM: E T; 

p _ fle i = i 
PiT,(X(n)) = XN} 1X = 15 ini (2.4.8) 
其 中 
iy = minlarg min! CX, Ca) i 
称 为 强迫 * 劣 法 ”遗传 算法 。 
定理 2.4.7 ”强迫 " 劣 汰 "” 遗传 算法 是 齐 次 马尔 可 夫 链 , 且 种 
群 序列 (rm);n 22 0] 以 概率 1 收敛 到 满意 种 群集 M" , 即 
lim P| X(n) € M'/X(0)I = 1 
证 明 ”对 于 任意 X,YE SY 有 
Poa yn + I.X,Y, ) = pa PITAX a) = (Y,,Y.:): 
(Y iY... 


.PIT (Y Y) = Y, ' ` P|T, (Z) = 


I 
=. 
` 
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其 由 Y. = (Xs 
iy = min Targ min: fi XG 
“i Y + Y. At, Pin, + I.X, Y) = 0, FEX Omin =O; J Pr 
KAME DAA REES F 
PIT = X\IX =1 
PAL) z ja Bt 
PIX ETX) = 1 
AE 22.5 则 证 。 
结 谷 杰出 者 选择 遗传 算法 和 强制 “ 步 钱 ”算法 ,我 们 可 以 得 到 
“TUNE BR” WG RL EMIT A PRR F: 
(1) 取 ”= 0, 随 机 选择 初始 种 群 X (0); 
(2) Æ XC) 中 独立 地 选择 N 个 母体 ,使 用 标准 遗传 算法 得 
到 种 群 | 
Y(n) = (Y (n), YA (n)) 
aE XO), ië ja = maxlarg min! f( X, (aD)! Lott Yin) id 
iy = minlarg mint f¢ Y (n)yii 
得 到 新 {CRF 
XCa# +1]) = (Yin, Y KX. (a ), Yiu lady, Y. n)) 
(3) 当 满 足 停 机 准则 时 停止 ,否则 转向 (2)。 
定理 2.4.8 “(KABA MERE RA RSI RE. 
BESF HUI Cn in 201 以 概率 1 KANAE M,e 
limP{X(w) € M>/X(O)! = 1 
证 明 MEER X, Y € SY, ja, B| 
Pinnt 1,X,Y)= PIX (n +1) = Y,/X] 
= N PIRO = CY YP)! 


ayy? E368 
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PIT.(YU),Y2?)= Z} + PIT,(Z) = Y 1 >0 


P, (ayn +1,8,¥) = PIX, (n + D = YI 
1, Y, = X, 
-oy zx 
TEIXO D;n 2 0| 是 齐 次 种 群 马尔 可 夫 链 。 由 
PIX,Y! = H P,Gn,n +1,X.¥) 
E 


利用 定理 2.3.1 证 明 方法 可 证 
limP1X(n) € M*/X()} = 1 


2-5 等 价 类 遗传 算法 的 马 氏 链 模型 


设 S = 10,11! 为 个 体 空间 ,S* 为 种 群 空 间 。 用 函数 2(X x) 
表示 种 群 X 中 个 体 X 的 个 数 , 即 
PX,X) = DaX) 
BM FER X € S.A (XN) = (YX), AX WY SH ip 
EX — Y. 
等 价 的 种 群 X 和 有 相同 的 结构 ,区 别 仅 在 于 排列 次 序 。 这 
种 排列 次 序 实际 上 在 遗传 算法 中 是 无 特别 作用 的 。 因 此 我 们 可 以 
将 等 价 类 作为 一 个 种 群 来 看 。 
如 果 假 定 K = 2',S 中 元 素 记 为 X,(i < K) 记 
p= @K.X) (¿=< K) 
(gis. = [Xs p(X,X,) =9(i<K) 
则 将 S" 分 类 得 到 新 的 等 价 类 种 群 空间 
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K 
sis (pis eres Se = N| 
EE 2.5.1 对 于 等 价 类 种 群 空间 Si 中 有 
[S] <| sS | 
证 明 由 定理 1.1.2 
bgt] = are 
K-1 
且 对 于 任意 其 > I n> 118 
RK > K + n — 1 


[[ (ak) > [[ Ck +x- 1) 
n=l a=l 
N!K“ > KCK +1)--: (K + N - 1) 


于 是 
_ L KCK + 1)--(K + N-1) 
_ N+kK-1 _ [K] 
- [ K-1 J=Is | 
为 方便 起 见 ,固定 
S= X; iS Kl 
K 
SI = jipen g) = gre, = N| 
其 中 
(pis ) 三 IX;e(X,X.) = pK) 
Py = PIT.(X,,X,) = XN, 
P; = P{T,,(X;) = X, 
AT PE 
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x ee S". X ES, RP, 表示 在 等 价 类 种 群 的 条 件 下 转 科 
到 第 个 个 体 X, 的 概率 。 上 是 有 
站 
roln) = Ce i(n), gk (n))i 


== — NI _ ti CP ysi D 
Cn + lto ek Ca + 1131 gt al. 
(2.5.1) 


fe ET RR ola) 的 条 件 下 ,选择 X, 的 概率 为 


PIT (e(2)), = X,! = ft (n)f( X ) 
Ne (n)f(X,) 


— 
-1 


-~ 


h 


ela}: f = Ue Cn SCX, ) 


PIT Ce(a)) = X ! = PAIX) 


十 是 
pP = wa e (n )f(X,) Sr ç (n) f(X;) 
vie g pin) m gta) f 


， SPP, (2.5.2) 


如 果 对 某 -选择 个 体 先 变异 后 再 杂 <U 、 


po a 6 AUDEX) Sy @.(n)f(X,) 
pind an ela) f 一 e(n) f 


z 


. `: P.P, (2.5.3) 


Irt ry, 


Gu He At PA AT E FE BY 4 EESE FE 5 , AY AT 


Hl mee ee 123 


P oN g. (n) (X. ) Ss g (n) (X, ) 
gins = got 一 e(n) f 


， NN P, PDP, (2.5.4) 


mi ` 
定理 2.5.2 对 于 0 < p, 所 1 上. 标准 遗传 算法 的 等 价 类 种 群 
到 到 写 有 限 齐 次 不 可 约 非 周期 的 切 尔 哥 友 链 、 
证 骨 HPO pa < LWP, > OG S< K). H 
P, > ü (= K. i S K) 


Hot(2.4.2) 即 知 
Pena © Pa P. bl, > 0 
pil fy R(2.4.3) 有 
Poon Z Pa Pa P, Pu > 0 
出 成 (2.4.4) tT 
Poo & Poa P... oP, P,P, > 0 
HuK(2.4.1) PD í 
Pie(n + 1) = (gelan + Doge la + 1)) 
reln) = (@ (n), gg Cadi > 0 {2.5.5} 
NY plat DEH e(a) AX FERR. 5.1) 知 式 (2,5.5) 与 
n ER, FEMER AE IE aD 3 t HS REUT A E A PAR AS AY RK 
AR AE. HRAC. 5.5) Bl, pO n 2 01 ÆA E PJ AE E WA 
定理 2.5.3 8 PPR MEIER K pE 
lelni Ol PE- Pe SER Pu SIKO, j k SC K), EEE 
lotro Ol A FRA SA R tk. 
证 明 Pe = KG, eK) BII PL, = YK S% 
K}. J: le 


124 ie Ae Se Se ul 


_ N! l 
Plein + 1)/p{tn)! = p r tl gn + D! KŠ 
Hz 
-Al L 
qale) = pierog! KS 
BI 
>` alg)Pleln + 1)Zel 
" `Y Í N! dl N! l | 
= ot Pr gk! KY pila + leon + 1)! KY 
pE & 
NI ; 
= el Ox q gP lola + Hi 
这 时 


P(e (m + 1) = 7) 
` 一 N (N — J)! ji 1 ) 
ee ie 一 


= awa) CK) | 


N ; Nos 
= G (z) (1 -去 
等 价 类 种 群 标准 遗传 算法 是 遗传 算法 的 缩写 。 它 是 把 一 个 长 
度 大 小 为 N 的 种 群 中 的 相同 个 体 进行 合并 作为 一 个 个 体 。g 不仅 
表示 个 体 为 X. ,而 且 表示 个 体 数 目 有 p 个 。 在 标准 遗传 算法 中 ， 
每 个 种 群 中 的 相同 个 体 X, 均 以 FLX ) Me . P) 的 概率 作出 选择 ， 
而 在 等 价 类 种 群 中 个 体 X, 统一 用 gf(X,)A(p A) 的 概率 作出 先 
择 。 杂 交 和 变异 与 标准 遗传 算法 相同 ,所 不 同 的 是 在 标准 遗传 算法 
中 ,种 群 相隔 的 个 体 不 是 全 部 袜 杂 交 和 变异 ,而 在 等 价 类 种 群 中 ， 
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只 要 是 相同 个 体 一 次 性 参加 杂交 与 变异 .因此 等 价 类 种 群 的 标准 
遗传 算法 与 一 般 标准 遗传 算法 有 相同 的 性 质 。 例 如 等 价 类 种 群 的 
标准 遗传 算法 有 极限 分 布 , 可 以 无 限 和 多 次 到 达 任 何 种 群 。 

为 了 进一步 研究 等 价 类 遗传 算法 的 极限 性 质 , 需 要 具体 研究 


等 价 类 遗传 算法 的 转移 概率 -。 
用 S*! 表示 等 价 类 元 素 集 合 ,转移 概 率 为 : 
Pls,s i = n) 2.5. 
5 is T leis, XI: (2.5.6) 


其 中 s,s € Sh. (x) RRS he FK X 的 数目 , 即 ofr). 
Pis, Xi 是 由 状态 s 到 个 体 X 的 转移 概率 。 若 仅 采 用 选择 算 子 , 则 


_ st XI FOO 
Pils, X} S (Y) Y) (2.5.7) 
Yes 
同时 采用 选择 算 子 与 变异 算 子 时 有 


Pafs, X! = Spee Pa = p OX? pi (X, Y) 
ES 


.5.8) 
其 中 p, AER BOH PIX 四 了 ,2 表示 通过 X SY 杂交 
后 变异 为 Z 的 转移 概率 HI 
Psls,Xi = >) Pils XIP ls. Y iP|XG Y.Z! 
yx Y€ S 


(2.5.9) 
BRA 
PRIX Y, Zi = PUXPZOCY BZ),o} 
(2.5.10) 
定理 2.5.4 MTPHAERA 


一 1 ey" k IXY! -E 
PIX@Y,0 = > > P (1 - P.) 
(MXP POX ixe Ori) 


mao Ë 一 m m 


126 it f FE AA M: pl 


( p PECL — py em ey (2.5.11) 
WEAR LE ACO RIX DY) 4 Lee k 38 
安 换 IBZ ak SCT EA PPL A AIIIN RR 
p= poy! Do (2.5.12) 
在 条 爸 之 前 , X DV) 个 位 置 可 以 分 为 以 下 两 种 情况 : 
(1) PAX HY PEASE AL 和 0 的 个 数 为 | (X Y)G 
X |; 
(2) MAX SY HAS RAO MIP Sk p| (X BY) G 
Yi. 
不 失 ARTE BSE X 45 Y 的 基因 为 1 OR AC — m) TERZ, 
MX !;y Y WEA AO ff 1 BP m TERE k - 3 PE 03 38 O 
(EE VOR e Peri 
Ë 一 m 
通过 均匀 杂交, 针 的 |(X 四 了 COX| 个 位 置 上 1 的 数目 减少 了 (上 
-m TYBIO NOY 个 位 置 土 1 的 数目 减少 了 个。 
因此 ,XX AREH MI Om- F) 个 ,这 样本 多 中 1 的 数 晶 为 
(CXI + 254 2), X 中 的 0 数目 为 人 -IX —2m +k) 类似 地 ， 
E Y 中 1 的 数 自 为 (|Y| — 2m + k), Y° 中 0 的 数 日 为 
(£- |Yi tlm - k). 两 个 杂交 个 体 中 的 一 个 变 为 0 的 概率 为 


n L pls Le + (1 a Pn y Noda ak 


+ pre _ Pn yi tia +] 
AL iit rota A TOS a =< REg 
1 M1 (XB VOR UNE Y)@ v!) 
2 — 


rr = (UJ 


tH 


Ë 一 mn m 


ere 


. [po k (1 _ Ph y: 'X Tm 
+ pie wee] _ p Vien £] 
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其 让 (2.5,11), 
定理 2.5.5 HEREKE 有 


PLEX GY 0) = -一 Pi pS (I p, yoo 


+ b. (1 T pay ü i 
fel 
w tL 


3 = 7 = lee A Ye] _ Py ISA 
+ Pig OPO CD = p.) MEY (2.5.13) 


其 中 pp, HAZE, H 
ACX YA) =I QF - 1) OO - Dey! 
证 明 ”类似 定理 2.5.4. 
推论 2.5.1 对 于 均匀 条 交 ,X,Y,Z € S, RW H: 
XBZ = 0, yzl =! 
BM 47 


P(X@ Y.,Z)= spp +A- p.) + lp = py 
+ 


(Ir pop, li (2.5.14) 
WEA HBH 
XPBZ=0, YDBZ=2 -i 


于 是 有 
(XBAIDITBZ)= 2 - 1 
于 起 
(XZ) (YG Z)]22 (X22 Z) = 0 
[(X Z) (YG ZI (YCDZ)= 2 - 1 
Mili 


PIXO Y.Zi = PIX DZ x CY PZ),0 


` ë ) 
-43 SAA - TES ' (i) 
mo Ë 一 m tH 
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. pa _ p, aiia + por gd _ Pm yz2= 2] 
1 sh k raf é 
= >We py) 
2 ohh p) (,) 
[r = py + pa C= PT 
‘vid 
= HAIN S PY (1 - Pia t 
k= Ü 


Í ít 
t >| ja - py pn O- ba | 
Ë = G Ë. J 


= Tapn + (1 pC = py]! 


+[p (1 -— p.) + (1— p.)p, |! 
推论 2.5.2 WNW .X.,Y ,Z € S, B3WKR 
Ix Z] =| Y Z! =! 


则 有 
PIXG@ Y,Zi = PIX X.X:i = ph (2.5.15) 
证 明 由 假定 知 
XDBZ=2 -1, ¥@zZz=2'-1 
我 们 有 
(XPBZBCY BZ) = 0 
LX Z) (YG Z2))% (XG DZ) = 0 
[(Xp2Z2)p( (YG Z)]OO (YD Z) = 0 
于 是 


PIX@Y,Z1 = PICXPBZ)OCY GBZ),0} 
1 + -4 An 0 0 
EA Da mla) 
. [per ~ p,m + peered 一 Pn pre] 
= p, 
id 
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Q = (P(s.s)is.s € S) 
I = (gl s]; ES MY 
解 线 件 方程 组 
= 
得 到 
ue ode det(Qis] - 1) 
gts] = SIdetQ[s] — D (2.5.16) 
ve tl 


其 中 QLs] 是 由 Q 导出 的 ,将 局 的 s 行 代 蔡 为 0 行 向 量 。 显 然 wo 
是 中 的 平稳 分 布 , 且 P. ,请 AXi slu] 为 状态 ; Cs 的 集 
合 , 且 满足 条 件 : 对 某 个 YE S, 当 w = u(X) CURA: 

(1) Cx) =N- 1 

(2) (Y) = I 

(3) d(X,¥) =1 
其 中 u CS") 是 一 致 种 群 A (X)OX CS) 的 集合 ,于 是 

qls] = lim, a [s] 


| lm, de(Q* [si - F) 
ay t 


> lim det(Q is ]- 1)’ s€ U 
s € U p 70" 
0, s@s"\u 


(2.5.17) 
HPQ [alle E U) EMAC € S\Us+ tal) 
Q*tal(s,s) 


0, $ = w 
~ lee + Ke € S[: ]) Qu x > z 
u > 
(2.5.18) 
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显然 ,对 十 任意 E SA 有 
> QlalGs.s) = 1 


cesta 
2.5.1 iff = 2.N = 2,0 
S = 1000 GON 10) (11), 


| 2 +2 - 1: 5 
Ist “7 = [> )= 10 


| 2 ! 


PE S" 中 的 元 素 为 


XjS,]Si|s:| si|s| Ss! SelS; [Sx] So 
== -T I 一 十 
00 2/1] 1] 140 olofo o 0 
010 1,0 11) 0 0] 
l 
l 


从 而 得 刘 

#{00) = x, ut 1) = S, 

all 0) = s, ull 1) = S, 

U = {sns Sis ys Syi 

Sisal = fsisl, Sls,l = fsyoxgi- 

SEs] = irssi, Sl sy} = [sesski 
我 们 由 式 (2.5.18) 可 以 计算 出 

Q [slo 9) =0,5E S* 

Q` [se lGs, sa) = Ps sy) 

Q'[s](s s) = Piss) + Pls,.5,97 

例 2.5.2 Bl=1,N=2,8 = OF = AÐA < 1. 


3 > 
= 人 了 =， 


则 
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id 
[5] = I Sus srrsa’ 
G HE sisa] 
0 211: 
.li01 1.2 
HE Fk t FE EB EE AH 
Q = 
Cl pg)? 2b. pm) Pn | 
N o Bat Fem [O - bo) + Fpa [pa + EU C pay; Toa + FEU pa )]2 
tb! F52 (l + FY tl + FH 
ph Pmt lo pa) (I: pa 22 ! 
0 Ü 
Q [sa] = ae b.) + Fp, Y 1 El - Pu) + Fp, F 
(O+ FF {f+ FY 
o [sa] = 
1-[p. + FO = pE Lp, + FOU- p.) 1 
(I + F) (I+ F) 
0 0 
<r. _ LU p,) + Fp, F 
det( Q [sud 1) = (1 + FY 
. [Pn + FU - pa) 
_ = -和 一 > 
det(Q [s] I) (1 + FY 


Wat (2.5.17) 得 到 , 当 p, 一 0 时 有 
g = (1⁄4 + F), O, FZL + FD) 
当下 -x 时 有 
q = (1,0,0) 
PREM p, 0 及 工 一 0 时 ,平稳 分 布 集中 在 最 优 和 解 种 群 上 。 
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一 般 地 ,对 于 S 中 个 体 适应 值 ,假定 
JEX) = f(X;) = = JEX) > FOX > f(X.) 
Xa) 


= max 
nse.) fO X,) 


当 ps-*0 及 下 一 0 时 ,平稳 分 布 的 极限 分 布 集中 在 最 优 种 群 上 。 


2-6 ”但 传 算法 的 马 氏 决策 模型 


设 5 为 个 体 空 间 ,S* 为 种 群 空间 ,T, .了 . 工 .并 分别 表示 蛮 
FAST ALAT .选择 算 子 .删除 算 子 .我 们 考虑 一 般 的 稳定 态 遗 
传 算法 。 

定义 2.6.1 PKRAC [0,11] x [0,1] x (0,0) x [0,0) 为 中 
传 算 法 的 行为 集 。 对 于 任意 a = (a,,a;,ay, a.) € Ava, 代表 变 
FAE, a 民 表 杂交 概率 ,a, 代表 选择 指数 ,ay 代表 删除 指数 。 

下 面 恒 假 定 A BARA, 

定义 2.6.2 称 映 射 d,;S* 一 A 为 决策 规则 。 若 dd, 是 确定 性 
映射 称 为 确定 性 决策 规则 ;车 d, 为 随机 映射 称 为 随机 决策 规则 。 

确定 性 规则 的 全 体 记 为 D™ , 随机 性 决策 规划 的 全 体 记 为 
D”, 

WEX2.6.3 称 决 策 规则 为 遗传 算法 参数 设置 策略 , 若 d= 
din 20) 5n KK, Pr 是 平稳 的 ,车 xr 是 平稳 的 且 d 为 常数 , 则 
称 x 是 简单 的 。 

Fin“ file” 分 别 表示 平稳 的 确定 策略 的 全 体 和 平稳 的 随机 策 
Re eK 

在 通常 的 遗传 算法 中 采用 的 是 简单 的 策略 。 

xt FRR X € Sn, 记 

F(X) = max {CX,)I 
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给 出 决策 参数 a = (a .a,,a,,a,) € A. BA 
X= T° T2. TOKE S 
Y= T#(X)€ S 
X 表示 由 区 通过 (ai ,ay ,as) 策略 ,通过 选择 .杂交 ,变异 而 得 到 的 
一 个 个 体 。Y 表示 通过 策略 a, 从 X 中 删除 的 一 个 个 体 。 
EX 2.6.4 对 于 二 元 函数 


g(r,y) = y (2.6.1) 
称 
| r(X,X,a) = g(F(X),f(X)) (2.6.2) 
为 瞬时 损失 函数 ,而 称 

+(X,a) = E(r(X,X,a)) (2.6.3) 
AHA RRR diS -> A 是 随机 决策 ,有 分 布 g, W 

ri(X,a) = E(r(X,a)) (2.6.4) 


对 于 式 (2.6.4) 可 以 表示 为 
r(X,a) = Slg(F(X), (Xp (X,X) (2.6.5) 
Xess 


其 中 
p. (X.X) = PÍT} e T2 ° TS (X) = XI 
=> 2 PITS(X) = (X,.X,)| 
FE Six ,XE st 
*P{T?(X,,X.) = YIP]Ti€y) =X} (2.6.6) 
由 式 (2.6.5) 及 式 (2.6.6) BU r(X,a) 是 a 的 连续 函数 。 
定义 2.6.5 设 P:S" x Sx A>([0,1]) 满足 :对 于 任意 
X € S" Ea € A, 有 
> PIX,Y,al = 1 
ye s" 
称 中 为 转移 概率 矩阵 族 。 
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定义 2.5.6 称 

Mbp, = [5,S, A,r Pur] 
Hr HERRAR SREE ERREN UR r 是 平稳 的 (或 简 
单 的 ) , 称 MDP: 为 平稳 的 (或 简单 的 )。 

对 十 MDP, 可 以 产生 以 下 的 遗传 算法 : 

(1) 给 出 SY 上 的 初始 种 群 半 (0), 置 n= D; 

(2) 按照 d, 的 决策 策略 选择 参数 ， 

a(n) = (a,ln),a,(n),a,(n),a (n)) 

(3) 根据 参数 on) 执行 稳定 态 遗 传 算 法 : 

X = Ta PEP TH (X) 
Y = Tat” (X(n)) 

(4) 在 种 群 XC) 中 以 X (OEE Y; 

(5) HEBERT HE AX la) Xian) 

(6) 答 满 足 停机 规则 则 停止 ;否则 转向 (2)， 

定理 2.6.1 MHDP',、 是 马尔 可 夫 链 . 

证 明 WFX + DRRR F alr) MXC) 的 分 布 ,而 
a(n) ERS X(2) BARER, AEX (a) sn 201 是 马尔 可 夫 
链 。 

HELM a)n S20! 为 马尔 可 夫 链 ,从 而 

y, = r(X(n),4,(X(n))) 
d, = d,(X(n)) 


BAO KE. 
MDP —# E: AR FF KAD OR n] EE a AY , M| MDP..、 
是 齐 次 蕊 尔 可 去 链 ; 


定理 2.6.2 任 给 平稳 的 场 尔 可 决策 过 程 
MDP... = 19 Sr P.n] 
以 及 S 上 上 的 初始 分 布 P, 必 存在 和 概率 空间 ( 吕 .8(02), 严 ) 以 及 其 
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PLL S* 为 状态 空间 的 Ly yn) KE LX Orin = 0! ws 
PIX(n #1) = Y/X(n) = Xi = PIX.Y,d(X) 
证 明 + OQ = (S`)' An) 5 Q BJP k r E H 
w = (crea) Cw, € S") 
Kuas QW CH AD FIER L ya, < ua Cor < h T 
Phon jw 人 
= P twn EP | ewn, + Wn, rd (eon, ) P Lewn on ‘dw ， J: 
WIPT a ACR, BCQ)) 上 相 容 的 概率 分 布 族 ,依照 柯 尔 莫 时 党 
夫 扩 张 定 理 知 ,该 分 布 族 在 {2,2(02)) 上 唯 -- 地 确定 了 … 个 概率 
分 布 POPE RE a De 1. 
X,(w) = w, 
Buk Xn Ol BLL PIX. Y d(X)! 为 转移 概率 的 马尔 可 
AE. 
定义 2.6.7 BEG RSUABR V:S OR’ X€ Sa € A, 
称 
QX u, V) = r(X,a) + BN PIX, Y a (XV) 


| (2.6.7) 
为 QQ ñi M hO < 8 < 1. 
定理 2,6.3 WS LERAASARAV 有 


minQ(X a. V) = mip Da(a) a, V) (2.6.8) 


uf A 
其 中 
W = ig: A. [0.1]; (a 2 0, W = li 
证 明 对 于 任意 4 CALS 
la = a 


. ' 
ule) = í ， 
l0, 4 =a 


136 过 传 算 法 的 数学 基础 


We € W ,于 是 可 证 
minQ(X ,a Wwe min >)g(a Q(X .a V) 
ac A # WOEA 
男 一 方面 对 于 任意 g 马 W, 有 
> g(a)Q(X.a , V) > minQ(X a, V) 
WY HE TE (2.6.8). 
定义 2.6.8 BBE (0 1) 为 一 个 固定 常数 , 称 作 折扣 系数 ， 
以 rr = dd 为 参数 的 MDP... 的 值 函数 为 
vO) = = r(X(0),d,( X(0))) 


+ DF E(r(X(0),4,(X(0))X(0))) (2.6.9) 
称 V' (+) = infV, (+) 为 MDPc RREAN -TER E 
最 优 的 ,如 果 有 
Ve (:) = VC) 

由 于 定理 2.6.3, 我 们 以 后 只 须 讨 沦 x 为 确定 性 策略 , 即 r = 
id,sn0l,d, € MD.AWNO< glr,y) <1,(x 0, yz 0) M 
而 

DADIE >z = I< ° 
til V. C) S LARGE. 

进一步 分 析 (2.6.9) 式 , 取 r = idysd, e l 为 确定 性 决策 . 即 
z, : S" — A 为 确定 性 映射 。 则 可 记 

ra, (X(0)) = r(X(0),4,(X(0))) 
是 S 上 的 实数 。 而 

E(r(X(1).d,(X)))) 

= Dra (XC), XP, IXO] 
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其 中 已 IX/X(11 RRA XO 出 发 ,由 du(X(0)) = a 策略 产 
E XL) WOE XO) 条 件 下 由 决策 策略 产生 X 的 条 件 概率 。 
于 是 有 ' 
ECARO dA (RADD = P, ra, 
其 中 必 为 $xS 上 的 矩阵 ,r， 32 S 上 的 向 量 。 一 般 地 有 
E(r(X(n),a2,(X(n)))) = Pa P. Pa, re. 


于 是 

V.(X(0)) = ru (XOD + DPPa Pa Pa, 

ra (X(0)) (2.6.10) 

对 于 平稳 确定 性 决策 有 

V.(:) = r+ RPV, (+) (2.6.11) 

定理 2.6.4 对 于 值 函 数 V: S" 一 R' , 当 

Vv = L(V) = min(ra + AP,V) (2.6.12) 
时 有 

V = V' = minw (xw = jdi) (2.6.13) 

de MD 


ERA 2 V =< L(V) W WW TLS d € MD 有 
V =< ra + BP. V 
FA PRE Te BHS 
v = ra + BP 4, Ve rq, + BPs, Cra, + BPs, V) 
< ra, + BPa, ra + B° Pa, Pa V 


由 于 n HA ABT OS EV). FAM ERs 有 
hen 
v < v, 
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VZ rr F BP, Vine 
MIEN € SRW, 于 是 
Cf — BP, )V 2: Cr, - ee) 
其 中 * AS* LAM EPS > S` LAR. J R 
V (I- Bp.) "(ry - ee) 
= (1 — BP, r- = Br) | +e 
Ve 
Math V > min Vv. = VO PAA. 6.12) ARCHE V = v. 
定理 2.6.5 W V ` E MPa Mea PEE -个 
ERAN WG ee VES RER = (< }” 使 得 
VV 
证 明 由 于 7(X.a) 关 于 a 是 连续 是 数 , 模 据 定理 2.6.4 知 ， 
arg minQ(X ,a,V") # SAM HEWN € S`. $ 
a (X) € arg min X.a. V) 
Wei = (2° BP PRM ETER Hd” ORE OE 
2.6.4 知 
v (X) = Q(X.,a V ) 
“PREM Vv" = v. iD 
Vo = (V'(X)X € S) 
则 ”满足 
V'(X)= rX, d (X)) 
r 8 VP, Yd (X))v ` (Y) 
mn Ye x 
(1 = pPOX Xd (N) NX) 
- ENPOX. Y. XV (Y) 


res 
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= r(X,d°(X)) 
38 L AG RE A Bi f 
G- PVO = r(d') 


y'= - PPY rid’ ) = NS g Prid) 
a L 


IH] r = (4° ye MZ TIT ë x ES 有 

V(X) = POX) + NB (Pp oe. XX) = 
v, (X) 
WHE. 


E 2.6.6 KIQ, (X,a)in z 01 WP RIERA ER 
Q PARE 
Q. (X.a) = r(X,a) 
+ BNI [PIXY .ai minQ,(X,a)] (2.6.14) 
MA FEER Q (X a) 有 
limQ,(X,a) = Q'(X,a) (X €S“, € A) 
证 明 | 
L(V(X)) = min(r(X.a) + BN PIX,Y,al V(X)) 
则 而 定理 2.6.4 | ji 
L(V(X)) = V(X) 
有 最 优 解 V OOOX € SY). TEM T 
V. (X) = minir (Xa) + BN PIX Y. l V,(Y)| 
f -a + i 
lim V, (X) = V'(X) 
AB AGA (2.6.14) 有 
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limQ,(X,a) = -(X,a) + 8 S1PIX,Y,al limV,(Y) 
u ves a 
= 7(X,a)+ BS PIX, Y,a} VY) 


YES 


ll 


Q*(X.a) 
则 证 。 
由 定理 2,6.6 产生 的 适 代 算法 有 两 个 实际 困难 :一 是 7 与 转 
称 概 率 族 必须 已 知 ,在 MDP。 中 ,这 些 量 无 法 用 显 式 给 出 ;二 是 每 
步 挝 代 必 须 穷 举 S 中 所 有 状态 ,这 对 MDP。, 也 是 不 现实 的 。 为 此 
下 面 给 出 MDP。。 最 优 值 函数 的 随机 通 近 方法 。 
即 
Q, (KX,a) = Q.(X a) + alandy o (X(n),a(n)) 
-(Q,(X(n).a(n)) - r(X.,a) - BV, (X (m + 1))] 
(2.6.15) 
其 中 af = 12 (1⁄2< a< 1).,a(n) 289 A EAH fE Pe, 
而 
V, (X = minQ, (X(n + 1),a) 
下 面 需 要 证 明 |Q, ;# > 11 KARA ARR Qo 
定义 2.6.9 ”考虑 式 (2.6.14) PA DRA KE UX(n), 
a(n));:n LO HFX E Sa CALF nç = 06 
m = minÍn > n,a: X. = X,a(n) =al 
PREP I mik > 1| HBR R(X) 的 回访 时 间 列 。 再 
令 
Tye = fe — H (k > 1) 
称 随机 序列 | r sk 221] 为 马尔 可 夫 链 对 (站 ,a) 的 回访 时 间 的 间 
Fa 
BR, (2.6.14) 中 的 马尔 可 夫 链 {(X(n),a(n));n 2 01 
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对 任意 状态 的 时 间 则 隔 列 |rs;k Sl} 是 独立 同 分 布 的 , H 
E(r,) < oo 
引 理 2.6.1 对 于 atn) = 1⁄#2° (1⁄2 < a < 1), FER ERR 
c >0,d >0,% m = [ee 21), 8 h[ z+ ] ER TFET z 89 
最 大 整数 。 定 尺子 列 
n, = d, My = Mp- + c(n, 一 Mi.) (k = 2) 
则 有 


(1) Sain) = oo De (=) < °° 


(2) lim (my 一 M- M = 0 


oo 


Zalm) = = ° Sern ) < co 
证 了 明 o 5 (2) BR. 下 证 (3) 成 立 。 首 先 ,对 于 任意 6 >O, 
ya (Cn) < oo ABER AK Hi 的 定义 


n, = d + cn, — an (2 = 2) 

因此 
Salm) = a(d) + > (d — cn, + em) 
k=1 k= 

WFO e<, N 
(d — cn, + cn)" < (d — cn, + ck'**)* 
<[e+ (d ~ ony) ats |k 

于 是 


or 


Seld - cn, + cn.) = ° 


k= 2 
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财 证 . 
引 理 2.6.2 Bala) = tntl2<a<x1l),A 为 有 了 腿 集 ， 
WX €E Sa € A, > 
aln, X.a) = ags a Xa) 
BOX alaaa 2211 OX a) 的 回访 时 间 间 隔 满 足 : 对 于 任意 
M > 0 fi 


Pi 
则 依 慨 窗 上 有 
\aln, X a) =+% 


oa 


` a(n, X a) < oo 


' 
= - 


x 


证 明 iD Pink el! Mln > 11 分 别 为 马尔 可 夫 链 对 
(X ,a) 的 回访 时 间 与 回访 时 间 间 隔 , 则 有 


Nay) = Sla(n N.a) 
a | .| 
A 
a 
A= las SS ala) =+ oO ; 
ae 
依 引 理 2.6.1 及 aln) 的 单调 性 ,对 任 给 的 下 整数 q. > OF 
ADtwin, < don Rn om sk Sl 


OP m = (A Joe EGR KECK Oa) ERN , HK 
V ó > 0, 取 d 充分 大 使 


Pla > al < +8 


令 Q, = n. -mlk 1), Fi >t B A = y 


1 -om 
l-a f Tai ` 
Kit ¥o> 0,88 c 充分 大 使 
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py 
PIAL S Plain, S dou Selma, — sk SU 
Z= Plain Sel. om hk all- Pla, > d| 


=ef- + )- 28 > 1-0 


由 十 5 的 任意 性 即 证 PCA) = 1. 
引 理 2.6.3 EMULE 
Aix) = [1 — 0,07) J4,Cr) + a, (r)F, (z) 
HPpre A,A 为 有 限 集 。 BHE 
(I) Ve € A, 29 (z) = °, Nalla) < lae.) 
(2) Yan > WEG, GDI < lla, | (< pct) 
G) Va SII DOR Ce) i < (C + CA Yc, > 
0,C, >0),W V >+ € A, lima, (>) = O(a.e.) HAP 
| 4, Il = maxlA, Cr) | 
定理 2.6.7 设 式 (2.6.14) PA 为 有 限 集 ,马尔 可 去 链 对 
(X ,a) 的 回访 时 间 间 隔 满足 ; 


Pir M! > exp [| - va (2 > r) 
则 有 
limQ, (X ,a) = Q(X,a) ta.e.) 
证 明 i Q '(X.a) 为 MDP 最 优 函数 ,V 为 最 优 值 函 
数 , 于 是 
V"(X) = minQ (Xa) 
At Jon 2 t,id 
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A, (x) = Q.(X,a) - Q'(X.a) 
aln, X,a) = a(n) yaa (X,a(n)) 
F.(X,a) = [r(X,a) + pBV.(X(n + 1) - Q'(X,a)] 
* ya. o (X(n),a(n)) 
WO 6.14) 可 以 写成 
A, (X,a) = (1-a(n,X.,a))A,(X.a) 
—a(n,X,a)F,(X,a) (2.6.16) 
由 引 理 2.6.2 知 , 引 理 2.6.3(1) 成 立 ,下 证 (2) 和 (3) 成 立 。 
(2) Wn BIXEE Sa € A, 
|E(F (X,a))| = PiX ín) = X,a(n) = at 
-[+(X,a) + A SPX, ¥,a)- V,(¥) - Q'(K,a)] 
yes” 
<P UM PR Y, a)l V,(Y)- V'(Y)| 
Ye 
<P P(X,Y,a)max[|Q(Y,a)- Q'(Y,a)| 
res” En 
= p || A. ll 
(3) Vn >1,X ENa € A 有 
D(F.(X,a)) < ECF, (X ,a)) 
<2E(r(X.a) - Q (Y,a)? 
+26 ST P(X, Y,a) V2(¥) 
yes" 
由 于 r(X,2) 为 (0,1) 上 的 随机 变量 ,于 是 
C = 2E(r(X,a) - Q'(X,a))2 < oo 
KA DIF, (X.a) < C 
+28 X P(X, Y,a) | V,(Y)—- V* (Ý) + V, (Y)? 
ve s" 
C+ SIP(X.Y.a)[|V.(Y)- v ODE 


Yes 
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+21 Www CT) —- VOY} VOY) + OW" (YD ] 
<C+2e[ | 4, ll? +2 A, || + a7] 
其 中 d= may V’ (了 ), 则 证 引 理 2.6,3 的 (3) 成立 ,于 是 本 定理 得 
ye 


证 。 


遗传 算法 收敛 性 的 一 般 理 论 


3-1 遗传 算法 收敛 的 定义 及 性 质 


uk E = SN 为 种 群 空间 ,P 为 SY 上 的 概率 分 布 ,GO, : S S“ 
为 随机 遗传 算 子 , 则 
X(n +1) = G,(X(n)) 
构成 S` 上 的 马尔 可 夫 链 。 记 
PIX, Yt = PIX(n +1) = ¥/X(n) = X! 
GPX, Y) 为 第 n PERAE sq Iris B C SN , 记 
PIX,B! = OP IX,Y! 
PPIX, B] 为 {X(n)i 的 马尔 可 夫 核 。 
设 f: S 一 R' 为 适应 值 函 数 , 记 全 局 最 优 解 集 为 ， 
M = Xi VY € S#A/(X)2 f(Y)I 
定义 3.1.1 FIXO) WE 33k a p| p Er t 2 AE |; 
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limP1[X(n) 1M Z @]! = 1 (3.1.1) 
记 作 X(n) -> M(P.W.). 
定义 3.14.2 iX in) 概率 强 收 合 到 全 局 最 优 解 集 ,车 
limP{[X(n}) C MY =] (3.1.2) 
记 作 X(n) -> M(P.S.). 
定义 3.1.3 HIX 几乎 处 处 弱 收 和 伍 到 全 局 最 优 解 集 , 若 
Pllm[X(a) M z @ = (3.1.3) 
记 作 X la) > M(A.S.W). 
定义 3.1.4 BIX) 多 平 处 处 强 收 但 到 全 局 最 优 解 集 , 若 
Pllim[X(n) C M]! = 1 (3.1.4) 
Wve Xin) — M(A.S.S). 
定理 3.1.1 种 群 序列 XX(w)| ACU AKER: 
(1) JLF Sh Rb a ie ak => TLE ab eb BH KS — 概率 弱 收 就 ; 
(2) 几乎 处 处 强 收 第 二 概率 强 收 敏 一 HE EB Ue Bt 
证 上 明 _ 首先 注意 事实 ; 
[X(n) CM]C [X(n) ) M= @] 
Bi 
PI[X(n) CM] < PI[X(n) MES) 
FE eK. 1.2) IX(23.1.1), RG. 1.4) IX(3.1.3). 5 -H 
面 ,由 于 


lim[X( I N M= @] = Ü NIX n M =ø] 
于 是 由 概率 的 单调 性 有 

Pilim[X(n) NM # @]! 

= limP! ALK) AM z SI) 

< limP|[X(x) N M SII 
SAAT RG. 1.3) 式 (3.1.1D)。 同 理 有 式 (3.1.4) 一 式 (3.1.2)。 
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定义 3.1.5 称 8C 己 S 为 满意 解 集 , 若 对 于 任意 X E B. 
Y & BEA SOX) > f( Y). 

-PRERE B 是 这 样 的 -- 个 个 体 子 集 , 它 的 每 一 个 个 体 的 
适应 值 均 大 于 满意 解 集 之 外 的 个 体 适应 值 ,显然 最 优 解 集 M 为 满 
意 解 集 。 对 于 任意 XE€ S. 

BCX) = LYGOS XN 
为 满意 解 集 。 

BB, 为 满意 解 集 , 则 公有 流下 两 种 情况 , 即 Bl C B, 或 
B,C B ., TB U B,.B, 1) B, 均 为 满意 解 集 , 全 局 最 优 解 集 M 
即 是 所 有 满意 解 集 之 交集 ,NM 为 最 小 满意 解 集 。 

定义 3.1,1 ~ 3.1.4 中 可 以 用 满意 解 集 B 代 蔡 最 小 解 集 M, 这 时 
称 为 在 对 应 意义 下 收敛 到 满意 解 集 - 特 别 是 对 于 。 > 0 有 满意 解 集 ， 

Bled = Y; fCY) S F(X ) -— el 
其 中 X` 表示 最 优 解 , 即 X" € AM。 在 实际 问题 中 只 要 求 收 伍 到 满 
意 解 集 Ble) 即 可 。 在 理论 上 来 讲 ,如 果 1X(n)| 对 于 任意 满意 解 
集 是 收 敏 的 , 则 必 收 敏 到 全 局 最 优 解 集 。 

对 于 X = (X... X.) € SN je 

B(X) = IX; : f(X.) RAX G < N) C S 

D(X) = |X,; f(X,) < f(X,) (j < N)! C S 
EIXO) 是 遗传 算法 序列 , 它 是 SS 上 的 马尔 可 夫 链 ,到 

b, = 6(X(n)) € B(X(n)) 

d, = d(X(n)) € D(X(n)) 
则 {16,1 Rid) 均 为 S$ 上 的 马尔 可 夫 链 : 称 16,| WX) 的 优 什 
BERUR, ld | WX Cn) 的 劣 秆 马尔 可 夫 链 。 

定义 3.1.6 #KIX(n)] 的 优 值 马尔 可 夫 链 所 ,上 概率 收 伍 到 
全 局 最 优 解 集 , 若 

limPlé, € MI! = 1 
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称 16,1 几乎 处 处 收 雍 到 全 局 最 优 解 集 ,车 
Pllim[lb, € M]l= 1 
3EX3.1.7 BIX 的 劣 值 马尔 可 夫 链 1d,1 PER 
全 局 最 优 解 集 , 若 
lim Pid, € MI = 1 
Pid, | 几乎 处 处 收 合 到 全 局 最 优 解 集 ,车 
Pilmld, € M]i= 1 
定理 3.1.2 HFX (n): 及 其 优 值 马尔 可 去 链 16,} MSA 
马尔 可 夫 链 1d, 上 | 有 以 下 关系 : 
(1) IXO RRS AAAA RARER, ENEE t 
HR AT REELS, 概率 收敛 到 全 局 最 优 解 集 。 
(2) iX 几乎 处 钼 弱 收 化 到 全 局 最 优 解 集 , 当 且 仅 当 存在 
RAE AR HY HE |B, | 几乎 处 处 收 化 到 全 局 最 优 解 集 。 
(3) 1X Cn) | 概率 强 收 伍 到 全 局 最 优 解 集 , 当 且 仅 当 存在 尖 值 
马尔 可 夫 链 |d,i PERRIS BRE. 
(4) 1X Cr) 1 几乎 处 处 强 收 伍 到 全 局 最 优 解 集 , 当 且 仅 当 存在 
劣 值 马尔 可 夫 链 1a,1 几乎 处 处 收敛 到 全 局 最 优 解 集 。 
证 明 ”由 于 如 € M EA X(n) 1) MZ @ XGN MZ 
D BP B(X(n)) 1 MZ SIAM b, € B(X(n)) Y M.5, € 
MMEO) 与 (2)。 又 因为 d, € M Pi X(n) CM, X (a) C 
MW.D(X(n))C M MEFE d, € D(X nN M.d. € M. 
则 证 (3) 与 (4)。 
我 们 指出 定理 3.1.2 对 于 满意 解 集 B 同样 成 立 。 这 时 j 5 | 与 
id, | 相应 地 收 伍 到 满意 解 集 p. 
{X(n)| 是 SN 上 的 马尔 可 夫 链 时 ,15,1 和 |d,| 是 S EMG 
尔 可 去 链 , 则 f(5,) 与 f(d,) 是 S 上 的 实 值 马尔 可 夫 链 。 这 样 用 
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thet la, | BRL)! SSO.) eX a) 的 收 合 性 会 更 
方便 。 
定义 3.1.8 RS, 是 S 上 的 实 值 随机 变量 序列 , 称 f, 概率 收 
Kf , 著 对 于 任意 es > 0 有 
limPpl| f, - fl Set = 1 
记 作 f, -= f° (P Ék f, JU babe eB 广 ,车 
P llim f, =f t= 
记 作 f, -= f (a.s.)o 
定理 3.1.3 XO) 概率 弱 收 敛 到 最 优 解 集 , 当 且 仅 当 存在 
优 值 马尔 可 夫 链 15,1, 它 的 适应 秆 序列 1 (6,)| 概率 收敛 到 最 优 
适应 值 /” , 即 
X(n) —» M(P.W.)S Ab, € B(X(x)).f(0,) > f" (P) 
其 中 
f" = max! f(X) x € SI. 
证 明 ”由 于 S 是 有 限 的 ,在 S$S 上 的 透 应 值 全 体 f 也 是 有 限 的 。 
于 是 当 n 充分 大 时 有 
KXAN M= @=3b, € B(X(n)),6, € M 
Ib, € BIX aD, fe) = f° 
则 证 。 
定理 3.1.4 XO) 概率 强 收敛 到 最 优 解 集 , 当 且 仅 当 存 在 
劣 值 马 尔 可 夫 链 id,1 , 它 的 适应 值 序列 | fld, )| 概率 收 伍 到 最 优 
适应 值 f° Bn 
X(xn)— M(P.S.) 
Jd, € D(X(n)), fld,) >» f (P) 
证 明 “类似 于 定理 3.1.3。 
定理 3.1.5 X(n) 几乎 处 处 弱 收 仑 到 最 优 解 集 , 当 且 仅 当 
存在 优 值 马尔 可 夫 链 15, |, LPL f(b, | 几乎 处 处 收敛 
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到 最 优 适 应 值 广 , 即 
X(n) > M(A.S.W) 
eb, € B(X (a), f(b, ) > f" (as) 
IX OD SLAF AE RKA I fE , `5 A E E (8 23 OT 
夫 链 1d |. HG MAE Cd, JUF kb Ab k Oe 8) Ez X YS BEA 
f° , 即 
Xan) M(A.S.S) 
add, € d(X(n)). fld,) > /f° las.) 
证 明 ”类 似 于 定理 3.1.3。 
x} FRX = (Xie =, Xy) $k 
Až) = 1 LOOX ) 
为 种 群 适 应 TREIE, AF BAR TAGE XC} 
£, =R RGD = 二 SFO) 
为 种 群 平均 适应 值 序列 , 称 为 种 群 均值 马尔 可 夫 链 。 
定理 3.1.6 (Xin) 几乎 处 处 强 收 敏 到 最 优 解 集 当 且 仅 当 
它 相应 的 种 群 均值 马尔 可 夫 链 几乎 处 处 收 敏 到 最 优 值 , 即 
X(n)— M(A.S.S)jST(X(n)) -> f° (a.s.} 
IX (a)1 Ry St B| Et IK fg $E BO 
n] He a 8 32 46 A , BD 
X(n) > M(P.S)@F(X(n)) — f" (P) 
EA AFSS PRRAR WIAT, = 了 (XX(n))| 为 有 限 
集 。 于 是 产 = f' St X(a)C M( 当 nn 充分 大 时 ), 则 证 。 


3-2 ”遗传 算法 概率 收 合 定理 


i P AS 上 的 概率 分 布 ,f 半 (nn)| 为 SN 上 的 种 群 马 尔 可 夫 


152 遗传 算法 的 数学 基础 


链 序列 ,AM 为 全 局 最 优 解 集 , 有 为 任意 满意 解 集 , 记 
e = PIX(n +I N B = Z#Z2X(n) n B = @| 
(3.2.1) 
B= PIX + U NB = ØX NB = @! 
(3.2.2) 
METEM 
EHE 3.2.1 Al all ,| 成 ! 满足 : 
(1) >O — pty = co 
(2) im S = 0 
MiX) AL EEE 8, 即 
lmPiX(n) B= 02|]=1 
若 对 任意 满意 解 集 BEGG CO WIX (on) | 概率 能 收敛 到 全 局 
最 优 解 集 M。 
证 明 iZ 
Pala) = PiX(n) NB = Øl 
则 由 贝 叶 斯 公式 有 
Poa +1) = PIXOn + D n B = @! 
= P|X(a +) ) B = ZX (n) ñ B = @| 
:PIX( I) 1 BZ @! 
+ PIX(n +1) Y) B = S/X(n) NB = @! 
-{PIX(n) n B = Ø] 
< aB + ËP, (n) (3.2.3) 
由 条 件 (2) ,对 于 任意 s > 0, 存 在 N, , n>N, 时 有 


HB 
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Bia, S< y (1 - 所), 由 式 (3.2.3) 即 得 


(Pan + 1) 一 5)- g (Pala) = 5) 
= Pala + 1) - EPan) - a <0 

JA mi 

Poln +) F S< [P.O - $ ) (3.2.4) 
利用 递归 公式 (3.2.4) 即 得 

Poms WSS + A(S) 
条 件 (1) 等 价 于 ][ 2 = 0, 干 是 存在 N;, 当 之 N; 时 有 [| Bl < 
与 ,从 而 n > max(N,.N,) A P. (n + 1) =< e , IH = HUE HERI 
得 到 : 

lm P| X(n) n B = 2! = lim P, (n) = 0 
于 是 有 

lmPIXCo) 人 天 Ci = 1 

由 定理 3.2.1 可 知 ,区 (z ) 的 收敛 性 与 oa 与 抱 参 数 关系 密切 。 
ai EWEX (n) 已 进 人 满意 解 集 时 下 一 步 脱离 满意 解 集 的 概率 ， 
BR ob 应 是 越 来 越 小 ,此 E X( n) 未 进 人 满意 解 集 时 下 一 步 仍 不 
能 进 人 满意 解 集 的 概率 ,这 个 概率 就 不 能 太 小 -特别 当 有 = p< 1 
是 常数 , lima, = 0 时 满足 定理 条 件 . 显 然 成 可 以 为 0, 但 是 及 关 
1, 这 在 直观 上 也 是 对 的 。 如 果 记 = ], 即 是 说 区 (n) 未 进入 满意 解 
集 , 则 下 一 步 必 定 不 进入 满意 解 集 ,这 样 | 区 (nn)| PTERA. 
为 了 给 出 概率 强 收 化 定理 , 记 
2Ë = P|IX(n + AB Z @/X(n) D E = @! 
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B = PIX(n + DNB Z @/X(n) Y B° Z @| 
定理 3.2.2 车 fas! Al 满足 


Na =e 


= 0 


MIRC Re NN RR 
lmPIXtn)C Bi = 1 
若 对 任意 满意 解 集 日 ,1X(z)l ARRIA, WX Cn) | 概率 强 收 
化 到 全 局 最 优 解 集 M. 
证 明 i 
Pala) = PIX(n) BAS! 
则 由 贝 叶 斯 公式 有 
Peln+l) <a" + ËP, (n) 
仿 定 理 3.2.1 证 明 过 程 可 证 。 
定理 3.2.3 车 对 于 任意 满意 解 集 B A: , 
PIX(n +I) B = BG/X(n) = XIEa, XAB) 
PIX(n +1) B= B/X(n)=Xt<6, (X n B= @) 
且 满 足 条 件 : 
(1) >O — b,) = oo 
a 
(2) ra 7° 
MIX) MBBS BRE M. 
证 明 ”由 于 
a = PIX(n +) 1 B = SRN B = @| 
_ PIXGr +) 1B = OX) n B = @| 
7 PIX(n)N BEDI 
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N P|X(n +1) 0 B = O/X(n) = XIPIX(n) = X! 


Ane 


PIX D BO 


> P{X(n) = XI 
ates 


"PIXG@)NBASI 
JE] ay iF 
É, =< b, 
由 定理 条 件 及 定理 3.2. 1 可 证 。 
定理 3.2.4 车 对 于 任意 满意 解 集 PB 有 
PIX(n + DNB Z @zX(n) = XI <a, 
(XN B = @) 
PIiX(n + DN B Z= @/X(n) = X] < b, 
(X N B = @) 
县 满足 条 件 : 
(NG - 8) = œ 


m 


(2) a, AA 5, )— 0 
MI X Cn) | BR Re Oe) IKEA E M. 
证 明 ”类 似 定理 3.2.3 可 证 。 
推论 3.2.1 LX (n) | 的 转移 概率 满足 : 
PIX(n + D N BZ @zX(n) = X! 
I, xn B= o 
>á, XNB=2 
SU LX Coe) | PEW De FS SE EAE Mo 
TERA HF a, = 0,6, =-1-6, HEH 3.2.3 可 证 。 
推论 3.2.2 SIX OO 的 转移 概率 满足 ， 
PIX + D N B = O/X(n) = XI 
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_ 11, XNB#D 
“lps, XNE=@ 
MIXO) ARRAIA BR LEM. 
证 明 ”类似 推论 3.2.1, 利 用 定理 3.2.2 可 证 。 
例 3.2.1 设 遗 传 算法 为 G = 5: m ,满足 
Xn +!) = G(X (1) = Š ° m (X(n)) 
_ JmX), mD € BX (CW) 
7 IX (a), m{X (Cr)) & B'(X(n)) 
其 中 S 为 选择 算 子 ,mm 为 变异 算 子 , 且 
B'(X(n)) = YOY) > fo Rn) 
MERE BB = [XX i B> @: ,如 
PiX(n+ DN B Z @zX(n) = X| 
= DPIX, Yil cone (Y) + yano Put OO] 
- 
=PLIX,B' N B'I + y PLEX BCR) | 
HEB (X) SB’ 均 为 满意 解 集 , 于 是 当 其 门 旦 = OMA (X) 
& Boh PH VY € B' B b(Y)€ BLK f(p(Y))Z f(6(T)), 
Ë) YEB (X), FEB C B'(X).B' Y B (X) = B* ,因此 
PIX(n + DN B> @/X(n) = X] = P'IX,B | 
3 X (B= @WBB'(X(n))C BI BCX) NB" = B (X), 
于 是 
PIX(n +1) 1) B= @/X(n) = XI! 
= PUTIN, B'(X)} + PUN B (Xy! =] 
4XOB= Oma POX .B >s > 0, 由 推论 3.2.1 可 让 
XOD PBR SER M 特别 取 均 匀 随 机 变异 算 
+f, X ñ B = @ BJ 
PiX, Bil po = ë >0 
则 满足 所 需 条 件 。 


第 3 章 Mew huk ae — EE ie 157 


13.2.2 采用 与 例 3.2.1 相同 的 遗传 算法 ， 取代 
B(X (a) 为 
BHX nD = LYA D 2 fld(X(n)))| 
则 可 以 得 到 
PIX(n + DNB = @/X(n) = X! 
_ fi. XNK =Ø 
IEB) tape 
RE P (X,B') Sd, MEX O) 概率 强 收敛 到 全 局 最 做 解 集 
M. 
记 
d, = mini (X,Y); X# Y, X, Y € S| 
r, =miniP2(X,¥); X,Y € S! 
有 以 下 定理 。 


定理 3.2.5 WF 3.2.1, 8 Sid, = 29, W X(n) — 


MC(P.W. )。 对 于 例 3.2.2, aon = 00, A X (n) — M(P.S.). 


iS XN B= SG 时 ， 有 
PIX(n + D NB @ë/X(n) = XI 
=P: |X,Y n B= g 
> $3 [Paix vai >a, 
结合 例 3.2.1 与 定理 3.2.3 则 证 X (2) -> M(P.W.). 
4 XN E >= Z ete 
PIX(n +1) NB = @/X(n) = X! 
= P*IX,Y n E: = Siler 
结合 例 3.2.2 与 定理 3.2.4 WE X(n) + MOPS.) 
例 3.2.3( 父 代 参 与 竞争 无 杂交 遗传 算法 ) ” 父 代 参 与 竞争 无 
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杂交 遗传 算法 为 
K(n +i) = S+ m(X(n)) 
Hl», 为 变异 算 子 ,S 为 选择 算 子 , 它 的 转移 概率 为 
PX la +1) = Z/X(n} = = X! 
= `P "EX, YIPTICX DY),Z! (3.2.5) 


Mh pr, JERE TERAK, P 为 选择 算 子 转移 概率 , 且 选 择 算 
子 满足 以 下 条 件 : 
MO XB YyC XU Y,(X@G Y> ES 
(2) EBX OX BY Ya (XY) (OOS f(Y) 
(3) 选择 算 子 的 转移 概率 为 : 
PIXODY),Z) 
= FTZ y AW] (Zc (X@ Y>) 


xei) 
(3.2.6) 
下 面 对 于 父 代 参 与 竞争 无 杂交 的 遗传 算法 给 出 概率 收敛 定理 。 
定理 3.2.6 对 于 父 代 参 与 竞争 无 杂交 的 遗传 算法 , 若 
Sy a = o 
ie 
WX Cor) | 概率 强 收 化 到 全 局 最 优 解 集 M ,其 中 
r, = mini FIX, Y|; X,Y E S| 
证 明 OWT BOX OB = OM WTS 
YAX OY) NB = SFR 
PX BY) Xt DNB Al = 0 
Miia, =0O.49XNBASOHRYNB =A, XHAR = 
好 ,于 是 
PHXG Y Xa+ DOB = @l =! 
从 而 
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CYPRE XDN B = D! 
Y 
> N BIX% Yi = PLiX. YUB =Ø 
yn re 
M6, = 上 -六 :由 定理 3.2.4 则 证 ， 
例 3.2.4( 最 佳 值 选 择 遗 传 算法 ) ie EATER 为 : 
X(n +1) = C+ SQ m€X(n)) 
Hip C 为 杂交 算 子 ,SS 为 选择 算 子 ,pi 为 变异 算 子 , 转 称 概 率 为 
PiX(n +1) = Z/X(n) = X! 


= SP, X,Y! X Ten, Vv, @ w,l 


PCV, @W,.Z,) (3.2.7) 
其 中 p" 为 第 HGR P hEn 步 选 择 转移 概率 , P 为 
第 ” 步 杂 交 转 移 概 率 。 记 
B(Y)= IYO) EA) G < N)| 
Y(X) = IY ;Y, = X! 
选择 算 子 转移 概率 为 
_, ]Y0V)ILIYOCW)] M 
PHY,V@ Wt = =: (V,WE B(Y)) 
IBCY}/? 
Tim i EAH BERR RE. 


iz 
a, = min P(X, X) X € S| 
d, = mini E(X, Y), X = Y! 
b, = max] PECX, Y): X Z Y| 
a, = mni (XOY, Xh X, Y € S! 
定理 3.2,7 ”对 于 最 佳 值 选 择 遗 传 算法 ,|X(w) AFRA 
到 全 局 最 优 解 集 的 条 件 是 ， 
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(t) SA-a, < oo 
n-1 


(2) Sid, = ©, lima" = a, >0 
n-i nee 


N 


(35 lim F = 0, 
na: NEED 
PIX, Y, Xa+ DNE = @| 


aloi 
lim — = Ü 
nin d, 


+ 7 = 一 至 
= RIX”. Yt X [[ Ply.v,@w,} 


V. WE BOY) = 1 
PAV, OW, X+ NB 
4YOBZOH,V,,.W, € B,MW 
PIV, @ w,,Z, & B! 
si- PIV @ W. .VI=l1-a, 
4Y B= OH,V,W,& BFE 
ST PIŠ, Ý, Xa +) NB HSS ST PUX,Y| 
Y 81 Z a YANH= C 
<P IX,Ý NB =Ø! 
分 两 种 情形 考虑 ; 
(1) 4XNB=OH, SYN B = Øh Y BAX, AYG 
< N), FE 
PIX Y NB= Si ois] 
(2) # yx n p zm 
X,Y NB =Ø =1-PIX.YN Bz G! 
<1-d,+ ay" 
+Ë X OB = On 
Pt iX lar A D N B >Z @/X(n) = XI 


<(1-a,) + o |S"! =a, 
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4N OB = @ 81 _ _ 
PUIX Cn +1) OB Z G Z/X(n) = X! 
= (lI -a,)+ (1 - dal) = b, 

AR bs E BB 38 PF BIS 


Sa- b= Mada (6)] 
a-l weed 


n=l nal 
im = fy C= Ba + 8218") 
nee fb, wee day! ~(1-a,) 


N : by 
-IS lim Gr = 0 

根据 定理 3.2.4 BRE 

ImPiX(D N B = Bt = ! 

例 3.2.5 对 于 最 佳 值 选择 遗传 算法 , 取 

Pr (X, Y) = ~va — b, ywx.) 
其 中 

d(X,Y) =lles X, KYLE =< Lil 
RNA 

b, = (1-p,)'p,, d,= pi, a, = (1- b,) 
对 于 单 点 杂交 


PIXO YZ = {ree Z= x 
d- g )+ ha, t, Z = X 
有 
a, = 1 — g, 
WT BAAR 


IXO YZ) = Il [Ol - 9, (X, BZ) + q Y DZ )] 
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其 中 心 四 请 = 1 当 且 仅 当 a = ,同样 有 
a, = 1 - q, 
根据 定理 3.2.7, 当 满足 条 件 
(1) lim p, = Ü 
(2)N>I 


(3) Sa, < co 
(4) St pl = co 
IX O | BERS PSPL p, =L, 


= 1 满足 上 述 条 件 。 


对 于 父 代 参 与 竞争 有 杂交 的 得 传 算法 可 以 表示 为 模型 
X(n +1) = G,(X(n)) = SCX Ca) am,» C. (X(n)) 
其 中 C, BREE F.C, 为 SY 一 Sm 的 随机 算 子 ,mm 为 Sr — SN 
的 随机 算 子 ,S, 3 SN - SY 的 随机 选择 算 子 。 
例 3.2.6( 整 体 退火 遗传 算法 ) XOD 的 转移 概率 为 
PIX(n +1) = YZX(n) = X} 
= SD PIX,WIP IW,ZIP IXDZ,Y| 


N | 
= [I [eur /De + Seen )] 
定理 3.2.8 整体 退火 遗传 算法 , 当 工 , ORL, X(n)| 概率 
强 收 化 到 最 优 解 集 MM, 即 


limPIX(n)} C M} = 
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证 明 q X OM = QG,XC M4 时 ,对 于 任意 ZE S% 有 


f maxi f( X); X € XG Z! = f° 
# Y Y MZ @ WFE Y. & YEY < f° ,于 是 
P(XDZ,YI 


N 
“a 
oo op x P 
el NN [Ne na> erT | 


i=1 
< e” Ya )- f" wT, =< eft, 
其 中 
& = mint | A(X} — fOY)1sfCX) AF Y)! 
于 是 
P|X(n +1) OM Z @ 2X(n) = X: 
= 35 Ð SI PuX.W} 
YNM zo2€ s" Wes . 
PLIW,ZIP. IX DZ, YI 
<IS\ le?" = a, 
x X YM = @,Y | M: =Ø, YCM, W 
Ps [XDZ, Yl 
N NiNa 


> [I [7% / ye ] 


+=1 
= [S+ 8) 
~ AN +N 


从 而 
PIX(n +1) = Y/X(n) = XI 
1 x 
> [N TN) 
FEM X OM = @ BÍ 
PUX,Y n M: TI 


164 遗传 算法 的 数学 基础 


1-P'IX,Y¥Y MM =Ø! 
1- (NFN) =. 
根据 定理 3.2.4 WHE, 
定理 3.2.9 在 整体 退火 遗传 算法 中 ,车 父 代 不 参加 竞争 , 则 
X(n)! API ME REE IE SL M , BD 
limP1XGr) C MI < 
iE AA NE SAI = r< r. 对 于 
X(n +1) = (X, X) = Y 
HE Z, X(n + DC 2 +E 
PZ.Y¥} 
= JI je IBT /Ne fe, ] 


h€ v Le? 


= [ ef" /Sie Hever, ia 


sez 


AN AN 


> (N; 
Aili TEE X ES 
P|X(m + 1) = Y/X(n)= X! 
> (N; 
PIX(n + 1)) 
= PIX +1) = Y/X(n) = XIP|X(n) = XI 


xe s" 


i ` 
> (Kz) 


PIX(n + DCM: 
=I1-PIX(n +1)= Y! 


1 x` 
<1- (xz) 
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则 证 。 
3-3 ”抽象 遗传 算法 的 概率 收敛 定理 


在 3-2 节 中 我 们 看 到 r Bo Ma? PP 在 讨论 遗传 算法 概率 收 
化 中 是 非常 重要 的 。 本 节 将 进一步 针对 抽象 遗传 算法 给 当 福 率 收 
AEH, 
设 X MY 为 种 群 , 记 
B(X) = IX; f(x,) > F(X) G < N)! 
F(X) = maxi F(X); X, € X! 
则 BCX) E X 中 适应 值 最 大 的 个 体 的 全 体 ,7( 总 ) E X HOOK 
的 最 大 适应 值 。 记 
Y(K) = [Y, € Y; f(Y,) = FX 
则 YOO 表示 Y MRE ap esa y GA BUN 种 群 中 最 大 适应 值 的 
tk LAL 表示 A 中 元 素 个 数 。 
定义 3.3.1( 抽 象 选择 算 子 ) 选择 算 子 S 是 一 个 随机 映射 
S: SY —= Sn YH AB: 
(1) WHER X € S". S(X)C X; 
(2) WEAR X € S IB(X)| < N 有 
P|IIS(XXK)] >| BCR > 0 (3.3.1) 
上 述 两 条 描述 了 选择 算 子 的 一 般 特征 ; (1) 选择 是 在 诛 种 群 
中 选择 ; (2) 选择 结果 要 有 可 能 增加 种 群 中 最 大 适应 值 个 体 的 数 
目 , 只 要 当前 种 群 不 是 齐 次 种 群 。 
例 3.2.1 ”假定 选择 为 比例 选择 . 妈 


PIS(R), = X1 = f(x.) /SX,) 
majl 
不 芒 假 定 1 BCX) | = N-1,X, & B(X), FE 
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PI SCXYKY| >I BOX): 


í ~ 
= PIS(X), # X. GN) = | >0 


LIX) 
于 是 满足 定义 3.3.1 的 (1) 和 (2)。 
定义 3.3.2( 抽 象 遗 传 算 子 ) ”抽象 遗传 算 子 G 是 -- 个 随机 暴 
HG: SS 一 SY, 它 对 于 任何 满意 解 集 B 均 满足 
(I t = PICOOINB= G X Y B> @l < 1 
2) # = PIG(XIN B= @/X n B= @l <! 
例 3.3.2 假定 G RE SRT, ERRA p(0< p< l), 
2 BOARS XX OB = @,BI X, & Bi < N). Hz 
Y€ B,Y = (X... Xa Y) WY Q BZ @,B 
P|G(X) = ¥/X| 
= (1 — p) pty] - py tw > 0 
于 是 
PIG N B> @/X n u= Bi >0 
从 而 
上 = PIG(X}N B= @/X n B= @! < 1 
同 理 可 证 
Æ = PIGON B= @/X n B= Gl <! 
因而 均匀 变异 算 子 满足 定义 3.3.2。 
我 们 指出 ,由 于 杂交 算 子 在 模式 V(X) 中 进行 , 当 BO W(X) = 
Z, GA 
B=PIG(XINB= OG/XNB= Gl-=1 
$B YXN BASH. BOAX) ASD, TE 
a = PIGIA B= @/X I BABI <1 
因此 , 仪 用 杂交 算 子 不 构成 遗传 算 子 。 
定义 3.3.3( 抽 象 遗传 算法 ) ”一 个 抽象 遗传 算法 是 由 一 列 选 
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择 算 is M- WHER TG ; 复合 构成 的 S 上 的 随机 过 程 ， 
措 表 未 为 下 列 的 状态 方程 : I 
MX€n +1) = G, ° S,.UXUn)) (3.3.2) 
其 由 X(0) € S` 为 随机 选取 的 初始 种 群 * 转 移 概率 为 
PIX€n 41} = Y /X(xn) = X! 
= IP. (XDP, (Z, Y) (3.3.3) 
z 
其 中 p. AS, MERRER, P, AG, 的 转移 概率 。 

出 于 给 定 X(n) 后 ,通过 算 子 唯一 确定 了 区,,， 的 分 布 ,与 
Xe Xa 的 状态 无 关 , 则 } 革 (nn); 是 马尔 可 夫 链 。 特 别 当 S., 
G, Sn EEH, X O)| 为 齐 次 马尔 可 夫 链 。 

定义 3.3.4( 选 择 压 与 选择 强度 )” 设 S 为 抽象 选择 算 子 , 称 

P, = suple € R';PIIS(X)(K)Y| Spt i >0, 


IB(X)I = li (3.3.4) 
为 选择 压 ,而 称 
L = inf PISNO SP, +h IBOX) = 1)! 
(3.3.5) 
HERE 


例 3.3.3{ 比 例 选 择 ) Bo HERE WTR 
X ES ,选择 概率 为 
PISI), = XI = AX, D/S Xn )) 
ml 
id 
p = max LS ol SOO) <a@ff(Y)),X.YES 
则 有 选择 压 与 选择 强度 。 
P=N-1,L= (1+(N- lo ) ` 
由 于 1 BCX) = 1, RSH X, € BCX), 
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PIIGA) > NI 
= PIG(X), = XGN) =a >0 
其 中 
a, = 0 f(X;)) a AX, H 
gel 
Wik P = N - 1。 叉 因为 


` MEX DIT _ r31 
a, 2 Ë +2 at = [I +(N - l) ] 


从 而 
L =I +(N- DET“ 
例 3.3.4( 线 性 ranking 选择 ) BERR X WE < /时 
f(X,) > JAX) WARA FH 
PIS(X), =X} = p + (N - j)q 


其 中 p,q 满足 
则 
fl NLY 
P, = N- L, 4 = Í + > 4] 


例 3.3.5( 非 线性 ranking 选择 ) EPN X 满足 i < ; 时 
FX) > JAX) WERKT A 
PIS(X), = X| = gli —- q)? 


Hp g 满足 
ad- _, 
l-g ~ 
则 


P=N-1, 1=1 
例 3.3.6(tournament 选择 ) S(X), ERX, 相 邻 的 * 个 个 体 
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中 的 最 佳 个 体 , 则 
P=s-1, L =1 
@J3.3.7(bolzman 选择 ) SCX), BAX, BMT TA 
确定 .车 CX.) > fCX,.), 
PIS(X), = JOX a)! 


= if! + exe( A Xj) = fO X: A) )) 


ik 
A = mint f(X) — f( Y); fCX) > AY) 
则 有 
P. = 1, L = (1 + exr(- #)) 
例 3.3.8(elitist HIE) HEX HAIG X) RBH OX) BE 
不 变 , 则 
P. = 1, I =1 
定义 3.3.5( 遗 传 吸 收 率 与 散射 率 ) RG 为 抽象 遗传 算 子 ， 


称 
Ay = inf PPLX.GXINBAS]LXNB=S,BCSI 
(3.3.6) 
为 遗传 吸收 率 。 称 I 
So = supi P[X,G(X) AN B = @] |] X ñ Bl >Z >B C. S| 
(3.3.7) 
为 遗传 散射 率 。 


A, = inffi- XN B= @,B C51 表示 吸收 能 力 ;Si £ 
示 散 射 能 力 。 为 了 保证 遗传 算法 收 和 化 效果 ,… 般 要 求 As SK, S; 
较 小 。 

例 3.3.9( 变 异 算 子 ) MEHR X € S, ERRET m 的 转 
HREN 
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Pim(X), 一 一 = Pn 
Pim(X), = zs} = 1- pn 
这 里 p, ARERR, r, ETX 的 第 ; 个 分 量 , 取 值 0 或 1。 如 果 
Pm < 1⁄2 , W| 8 
Ag =1- 《上 ~ ey 
So = [1-G- p.) - poe 
下 面 , 证 明 这 一 事实 。 按 照 A 定义 ,有 
A, = inf{P{X,m(X) ñ B= @l;x n B = Ø, 
BCS! 
显然 inf 可 以 在 下 述 情况 下 达到 : 
B = |(0,0,-- 0), X = {XX Xo)! 
其 中 
X = (1,1,..…,1) 
MAX B= 好 成 立 。 要 使 m(X) N BED, EPN- 
+ X, FE 99(0,0,---,0) 0X, 变 为 (0,0,…,0) 的 概率 为 六 ,因此 至 
少 有 -- 个 X, 变 为 (0,0.…,0) 的 概率 为 
Ag = 1- (I — ph)” 
下 面 进 一 步 计算 
SL = sup|P|X,m(X) NB = @!;|X Y Bi >r, BES} 
AR WHE LX OBI = r, 实 7, 这 时 在 以 下 的 条 件 下 使 S; 中 sup 达 
到 : 
(1) B = 1(0,0,.…,0)| 
(2) X PAr 个 个 体 为 (0,0,…,0),(N — r.) 个 个 体 为 
(1.1, 1) 
fe LRRAFIBOX! = +, Bi m (X) NB = 名, 必须 满足 以 
下 两 个 条 件 : 
(1) 每 个 个 体 X, = (0,0,…,0) BDH -- ERB 1; 
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(2) 每 个 个 体 X, = {1,1,…,1) 不 变异 到 (0,0,…,0) ,于 是 
S El- (I->, ] = pen 
当 p, < 1⁄2 W$, Es 5835 T p, 单调 减 , 从 而 
So<t1-d-p, Y] (1 - y 

例 3.3.10( 组 合算 子 ) ”组 合算 子 是 杂交 算 子 C 与 变异 算 子 

m 的 复合 运算 , 即 
(; = m + C 
设立 = C(K),Z = m(Y), 

对 于 杂交 算 子 CERY = (Y,,…,Yv) 由 六 次 独立 实验 
产生 。 对 于 i 之 NN,Y, 产生 过 程 如 下 :首先 从 X 中 选择 一 对 母体 
Y; , Y; M 

Ply, = Y, E Y” | =1 p. PIY = CY; Y) = b, 
C(Y;, Y”) 表示 通过 Y; , Y", 杂交 生成 ,这 时 
Ag = 1-(1- p), Së = [1 - (1 — pa) ] 

对 于 Ag 的 计算 ,我 们 只 人 须 考虑 齐 次 种 群 ,这 时 杂交 算 子 C + 

OE FA, hA 3.3.9 可 知 

Ac = 1- (1 pr) 
对 于 S; 的 计算 就 要 麻烦 得 多 。 首 先 计算 SX ,这 时 | 关门 B| = N, 
Ap iz 

B = 1(0,..….0)| 

X = i(0,0,--,0); ¿=< NI 
+Ë X AHUMEH, RAF RR WX B= 好 ,必须 将 
X 中 每 个 (0,0,…,0) 进行 变异 ,从 而 有 

Sg = [1 —- (1 — pn ) ]" 
进 -- 步 计算 St TRE 

B = |(0.0，……0)1 

X = (0,0), (0,0) a, DI 
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首先 考虑 杂交 COX), ALU 一 DAT 的 概率 取 .…- 母 体 为 (0,.0……0) 
和 (0,…,0) ,这 时 杂交 不 起 作用 。 有 (2/ - 12/7? 的 概率 取 的 母体 
中 含 1 个 个 体 (1,…,1)。 这 时 杂交 以 后 的 个 体 分 量 可 能 含有 1. 二 
是 

1-(1— p.) < |m ° COX), & RB! 


Perea ) 20-1 y 
<(F4)t-a- p] + r (1 一 pa) 
从 而 


由 于 Si (x < N) 计算 的 复杂 性 ,我 们 这 里 不 天 具体 计算 。 
由 上 面 的 分 析 也 可 以 看 到 ,选择 和 变异 在 吐 传 算法 中 起 着 关 
键 作用 。 从 某 种 意义 上 讲 ,杂交 的 作用 不 甚 明显。 
定理 3.3.1 ”假定 抽象 遗传 算法 潢 足以 下 条 件 ; 
(1) S, 的 选择 压 一 致 有 下 鼻 , 即 存在 正 整数 m > 0, 使 对 于 任 
Bn 有 Ps = m 
(2) >= Ae, = c 
(3) 对 于 任意 X € S" K m > 1 有 
P||S(XXX)] Z m! 
> inf PIISCY)CY)| > mi lB) = 1! 
(4) 对 于 选择 强度 1。 ,吸收 率 A, ,散射 率 ST 有 关系 : 
I-I (1 -— S2) 
lim — = (} 


are Ag. 
Ui Fall AE FL A, RS lk 8 SN E JS 1 I $E , BD 
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lim P |X(n) OMszA@!=1 
证 明 “对 于 任意 满意 解 集 B, iE 
a! = PIX(n+I Y B = @/K(n) 1) B= @! 
B= PIX(n +I) Y B = Øm Y B = @| 
= S,(X(n)) 
MERETE Y CX), TE Xa) N B = Z Bl # 
Y H = @. AT X(n) OB = OHA 
PIX,X(n +) B= @! 
= 3 PIX, YIP, IY,G(Y)D B = YI 


了 (站 日 = 2 


<i 


4 


> Ps X.Y 一 P. Y, `í V _ . 
cba oP a R YIO Po 1¥. GP) n B= BN 
-q + a 
Paine af Ix, Y 


I IA- Ag ) S1- Ag. 
则 证 

Be < 1 - Ag (3.3.8) 
xH: X 1 BAO, WY = S(X) C X MAME XA) OBES 
有 

PIX,X(n+DQB= @! 
= DPs IX YIP LY.G(Y) n B = Bi 
Y 
< S PO iX, YIP, IY,G(Y)D B = Øi 


YES PBI + 
+ > Ps IX, NI-P; IY,G(Y) D B = OH) 


IYER VBI Sel 


<l- 3 PQ(IX,YII1 - $24] 
IYARI m 7" aoa " 
<1- (1 Se )Ps (X, Y(K)| 2 m +i 
S1- 1 S s (3.3.9) 


最 后 一 式 应 用 定理 条 件 (3), 于 是 
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ai Sl- di U- SẸ') (3.3.10) 
由 式 (3.3.8) 和 式 (3.3.10) 以 及 定理 条 件 即 得 ,对 于 任意 满意 集 BA 

SU = pS MAG = ° 

a~l n=l 

ae L- fs (1 - Sg) 

Ü =< 1 _ E = 一 Ag. ki 0 

据 定 理 3.2.1 则 证 。 
定理 3.3.2 假定 遗传 算法 由 时 变 比 剑 选 择 算 子 族 | S,} 及 

组 合 遗 传 算 子 族 1C, , m, | 构成 ,S, 相关 的 适应 值 调 整 函数 为 ， 
而 m, 所 对 应 的 变异 概率 为 p, ,车 对 于 


p, = max] Uy), EXD < a FY) 


满足 以 下 条 件 : 


(1) p, = ° [+ ) 
(2) p, = of 
(N> 


则 对 于 该 遗传 算法 概率 弱 收 化 到 全 局 最 优 解 集 , 即 
tmPIX(a) Q MZ @| = 1 
证 明 由 例 3.3.3 知 只 = N-1 = m, 
l, -+rN-bDp = 1- O(e,) = 1 - oÍ 
又 由 例 3.3.10 知 


z | 一 
— 
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= O(n?) 
由 于 N > 1， (1- F)<o, 于 是 
l- Is (1- So) l- ig Sè 
—- 7 "q 7 + Í a 


MAW 
Sa, =- 
ARERI 1 ME. 
推论 3.3.1 如果 在 定理 3.3.2 中 取 (ed = e ARE 
(D T, = ofp] 
(2) p, = ol /I) 


IN>! 
则 遗传 算法 ! 关 (n)1 概率 弱 收敛 到 全 局 最 优 解 集 , 即 
lmPIX() 1M # Zi = 1 
证 明 ”引用 定理 3.3.2 中 记号 易 证 
p, = ea 
其 中 
À = mini f(a) — f(b); fla) > f(b), ab € S| > 0 


T, = ol tay S+ o = o( + )- WE, 
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定理 3,3.3 假定 遗传 算法 由 非 线 性 ranking 选择 族 S, H 
应 参数 为 g) 和 组 合 焉 传 算 子 族 i(C,,m.,)| {变异 概率 为 p.) 18 
成 ,及 满 足以 下 条 件 ; 
(l) ç, =t- o( 7) 


r 


(2) p, = o[ 1) 


(3) N >i 
MARRERO | 概率 弱 收 全 到 全 局 最 优 解 集 。 

证 明 类似 定 理 3.3.2。 

定理 3.3.4 假定 遗传 算法 由 tournament 选择 算 子 S 和 变 
FAF m (变异 概率 p.) 构成 , 且 满 足以 下 条 件 : 


(1) p, = of /+) 


(2) tournament RF s >= 
Wi 88 4 |X Con) | EE SG We KB Sit EE, 

证 明 “类似 定理 3.3.2。 

与 定理 3.3.1 平 行 ,可 以 研究 遗传 算法 | 芝 (*)} 概率 强 收敛 到 
全 局 最 优 解 集 的 条 件 . 这 时 ,需要 研究 对 于 任意 满意 解 集 

Pala) = tX) N B = @| — 0 

为 此 需要 利用 定理 3.2.2, 但 这 将 引起 一 系列 概念 的 变化 .这 里 ， 
BRAT FAL FB ie Qe be AR EE SR HE 


3-4 ”遗传 算法 的 几乎 处 处 收敛 定理 
前 面 我 们 讨论 了 遗传 算法 的 概率 收敛 定理 下面 我 们 进一步 


讨论 遗传 算法 的 几乎 处 处 收敛 定理 .为 了 利用 鞭 收 煞 讨 论 遗 传 算 
TAH JL Yah SE Be Se AE BB, SG oh oe RCP BR ER) 的 定 
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SLR TE Mar. 

BE 是 一 个 基本 集合 ,.* 是 已 上 的 部 分 子 集 构成 的 代数, 即 
满足 ; 

(1) Z € z 


(2) A € FFA € 
(3) A, € AR Sn) MUA € Z 
(4) A, € FA = limA, € 7 
P z LR CEP) RBS B], (EF) 称 为 可 
浏 空间 ,车 M FET SS BCE, 7) BUA Se ACE, ) RT, H 
WHERAC AFA 
M (A) = le;M(e) € AL € Z, 
则 称 M ASAE E M 是 实 值 可 测 映射 , 称 为 随机 变量 。 
WE, FP) 是 一 个 概率 空间 ,5C .7 也 是 一 个 代数 ,f 是 EE 
上 的 可 测 与 可 积 的 随机 变量 ,上 关于 SRA EC S/S) Boo n] 
测 的 和 可 积 的 ,有 旦 对 于 任意 A EE 有 
| E(f/dP = Í FAP 
A A 
显然 条 件 期 望 具有 以 下 性 质 ; 
(1) ECECf/9)) = ECS) Cas.) 
(2) Ba p ERK, I 
Elaf + Be 44) = aE f/44) + BE( S/S) (as. 
ay oF, 是 单调 增 的 a TOR S, EE EASE RR Cf, 7) AE 
AR fF, KTS, 可 测 且 可 积 ,同时 对 于 任意 mm < n 有 
ELS Fn) = f, as.) 
F E, Pn) Z f, (as), RA PRIA ECF) =< f, (a.s. ), 
RALE EIA i 是 有 界 的 , 则 对 FR, PRALR, lim f, 几乎 处 
处 存在 且 是 有 界 的 。 
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现在 我 们 利用 下 雪 收 鳅 性 讨论 遗传 算法 序列 。 
引进 以 下 记号 ; 

b, = max|P (X,Y):X z Y! 

a, = minf{P"?(X@Y.X);X,Y € S| 


FD = DAX) 
> = AX, ,X, pX) 
F, BARN. X, TRB ho 代数 。 于 是 可 以 得 到 下 面 定理 。 
定理 3.4.1 对 于 例 3.2.4 中 最 佳 值 选择 遗传 算法 , 若 


SLU =a.) + b7] < (3.4.1) 


则 存在 单调 增 有 界 的 正 数 序列 lw | BRIR + ahd 为 
FRAR TER, 
EC Ñ (n + 1)) + 055, 4F,) 2 F(X(n)) + ala 21) 
(3.4.2) 
证 明 ”由 于 | 关 (n)| 为 马尔 可 夫 链 ,为 证 式 (3.4.2) 只 须 证 
PM FER X CSA 
EF Xin + 1)) + ay AX ln) = X) 
> f(X) tala 2 1) (3.4.3) 
首先 ,由 式 (3.2.7) 有 
E(f(X(n + 1))/X(n) = X) 
= DAZ)PIX Cn +1) = Z/X(n) = XI 


= nD PAZ PIX (a +1) = Z/X(n) = X] 
SAZ, PiX (a +1), = Z,/X(n) = X| 
z, 


= PRIX, Ý S) (IY(xXIYCY)| ABO): 
, Y€ B(Y) 


=. 


T 
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. SIP'IX @Y,ZifCZ)) 
z 
因而 
EŠ (n + 1))/X(n) = X) -元 总) 
rl YOY) 
= SP IX,Y| Y = 
> xem = | BCY)P? 
. SIP X@ Y,Z1(f(Z) - f(X)) (3.4.4) 
为 了 合计 式 (3.4.4), 分 以 下 几 种 情况 讨论 : 
(1) # X & 0° ,Wrh 8B” 表示 适应 值 全 等 的 种 群 全 体 , 则 
HR) - JO > Š 


其 中 
Š = mint! AX) — f(Y)|; (X) = f(Y)| 
ië 
E = YeI, Yi SI P.IY.xX@ Y! 
Y= x X YEH Y) 
. SIP'IX@ Y ,Zl(f(Z) - Y(X)) 
z 
E, = P|X,X! S) PAX,x@y} 
X,Y€ B(xX) 
-IPIXQ Y,Z](/(Z) - f(X)) 
则 
E(F(X(n + /XN(n) = X) - F(X) = >, + š, 
记 


A = max] | fÉ(X) - KY); X,Y € SÍ 
则 对 于 任意 ZE S# F(Z) - fF(X)>- A, FRA 
5, >- AVP (X,Y) 
FAX 


=~ AQ ~- PUIX,X}) 
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- A(1 — a?) (3.4.5) 


其 中 
a, = mint PIX, Xl; X € S| 


X, = PIX, X} © P.(X,X G Y) 


X.YE H(X) 


Š PIXO YZI) - FX)) 
ZE B(X) 


+ PIX, X © P.IX,x@ Y! 


X. YERU 


> PAX @ Y,Z1Cf(Z) ~ f(X)) 
24 BX) 
# Z€ BX) WZ) - FX) = (X) FOS Fs Fe 
n>a A, >. PAX.X® v! St P'IX@ Y,Z! 
ZE RX} 
-å 5 PIRXOYI > PIX @ Y,Z!} 
Z&B(X) 


X.Y 
>al Š S PIX, ,XQYIPIXQY,X] 


X, YE BIX) 
-A St P.|X,X@ YI(1- P'IX@ Y,X)I 
x, YEA 
=> a Sa, - A(l-a,) = ce- A(i - a,) (3.4.6) 


由 式 (3.4.5) 和 (3.4.6) 即 得 

E(F(X(n + 1))/X(n) = X) — F(X) 

>eo-All-a)- A- a,) 

由 定理 条 件 知 ,a, -> 1,5。 一 1, 于 是 不 妨 假 定 

E(F(X(n + 1))/X(n) = X) - F(R) > ci 

(2) 4X € R'AM,M| f(X,) = = FX) = X) = 

HX) < f° , 记 

E = PiX, X) > PAX. X@Y! 


X,YE R(X) 
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. YP Ixe YZZ- F(X)) 


E, = > P PLIX,Y} © PLY,x@y!} 
=x X, Y€ BUX) 
yá Foe 


' DPIX @ Y,Z1(/(Z) - FX) 
E, = Y) PHIX,YI ST P.Y,X@ Y! 
ALYERCY) 


YON = 


: uP: IX QY,ZICf(Z) - FLX) 


w 
E(X (a + D)/X(n) = X) - F(X) 
= X, + >, tË, 
# X € B(X), W f(X) = FX) = FCM) , 则 
z = PS|X.,XI © P.IX,x@ YI 


X, YEBU) 


. 2° IXO Y,Z)(f(Z)—- F(X) 


>- AP iXX 51 PAX, XQ YI SIPIX® Y,Z1 


X,Y BCX 
~ AP. IX, XI S PIXO Yi 
X. YE B(X} 
-(1-PUX@Y,Xt) 
2- A(l-a,) =-— c,(1 — a, ) 
对 于 
Y = (X... Xk I e) 
HP e> Xy fle) = £" ,B(Y ) = jet WA 
PIX,Y I >` PAY ,x@ YI 


X.YEB(X) 


- SIP'IX @ Y,Z)(f(Z) - F(X) 
z 
= PEIX. YIP, Y ye xelPrle X e,el 


(3.4.7) 
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(fle) — F(X) 
Pr X,Y | (F(X) - F(X) 
Jay dd = esd, 
其 中 
d, = minl PS IX, Y1: X = Y! 


ara, Y Y XZ G.W Y € BY), SCY) = FOXY) = 


FUX) = F(X) M F(Z) < F(X) 383] Z > Y kE 


X, ad, + DPIXY SD pIY,X@YI 


YNE X YER) 
Y'= Y= X 


. SPX G Y.ZI(/(Z) - FX)) 
ZEAN 
Jed, -A X PIX,YI 


Y X=G 
YN 
> PAY. X@ YI - P'(X@ Y,X)) 
X,Y B( Y) 
人 cd - A(1-a,) X PRIX,Y] 


Z esd, - A -a, (1 - PL(X,X)) 
= c;d, -A(l—a,}(1- a`) 
od. - All- a,) 

“XO Y = @ BF,X, AYGUN) FE 
EA Š) OPLUX,Y| 


YX - ë 
- A|SI"6Y =- c 65 
联合 式 (3,4.7),(3.4.8),(3.4.9) 即 得 
E(X (n + 1))⁄K(n) = X) - F(X) 
ced, -cl -a,) - e bŠ 
(3) # XC M,W F(X) = F(X) = 广 , 记 


(3.4.3) 


(3.4.9) 


(3.4. 10) 
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D>) MY 


¥NX=a X, YER) 


+ SPX O v,Z1(7(2) - F(X) 


= 


z= SD PLIX,Y! © PALY,x@yY! 
foies X.Y€ BIY) 
x _ FX 
„g PIXO YZI) f(X)) 
Z, = > PuixX,Y} Sl PAY.x@ YI 
Ynix= X,YE BIY?) 
>) PIXO Y,ZI(/(Z) — F(X)) 


2G uty 

4X n Y SOPY) = 70D = /时 ,着 ZE BH, M 
F(Z) - F(X) = 0, 于 是 Z, = 00M X € B(Y).Z & BCY) 时 
Z= X, TH 

z> 2 PRIX XL + C aG - PUX@Y,X1)) 

YnxAee 
>- ACL ~a,) 5) PRIX, YI | 
YvYrKx= g 


于 是 
EFX (n + D)/X(n) = X) - F(R) 
-A 51 Pr|X,YI- AG - a). ST Pr IX, YI 


基站 -名 RT 
2>- AlS — AQ —a,) 
=- e+- a,)) (3.4, 11} 


令 c = (c; + c, + ccs), 综合 以 上 三 种 情形 ,有 
E(F(X(n + 1))/X(n) = X) - FX) 
I- ce (1-a,)- ca b — c (5 +1-2,) 
Z= cb + 1 — a, ) 


必 
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a, = PG +O) 
a, 是 正 的 单调 增 的 有 界 数列 ,并 满足 
EON Xin +1)) + a XOD = X) > (X) + a, 
于 是 定理 3.4.1 得 证 。 
定理 3.4.2 ”对 于 例 3.2,5 中 最 优 值 选择 遗传 算法 , 若 满足 
(1) STC - a, + bY) < co 
aot 
(2) Sid, = co 
a= 
MJ FX Ca) JU eb Me We LARRA, El 
Pllimf(X(n)) =f" }= 1 
同时 有 
Pilim[X(n) C M]! = 1 
PDX Cn} 几乎 处 处 强 收 化 到 全 局 最 优 解 集 。 
证 明 MEAIM 7(X(n)) + a, EFR, Ë w 存在 有 
限 极限 ,于 是 F(X a) ILE ADE Ak ie 
lmf(X(n)) =€ Cae.) 
利用 条 件 期 望 的 性 质 , 有 
EX (a + 1))) - E(Z(X(n))) 
= ELECG(X(n +1))/X(n))] - E[7(X(n))] 
= IPIX(n) = X 
- (E(X (n +1) la) = X] - X) 
>) PIX(n) = XI 
tes" a _ x _ 
e (E[f(X(n +1))ZX(n) = X] - f(X)) 
+ 3 PIX(n) = Xi 


Nap’ \M 
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- (EL X(n + 1))/X Cn) = X] F(X)) 
+ SIPIX(n) = X| 
X€ M > a _ 
*(E[f(X( + 1))ZX(xn)] - f(X)) 
Za PIX(n) & BS + (ord, ~ell- a,) ~ cb) 
-P\X(n) € p' N MI 
—(esb, +1- a, )P(X(n) € M) 
Za P{X(n) & 8' 1 + cd, PIX n) € p` NMI 
—c(1—a, + BS )PIX(n) € pt} 
其 中 
= (c; + c; + cs) 
关于 上 式 对 a 求 和 , 即 得 
f" SELIR a +1))]- ELAO 


>a DPIX) & pl +c, SIPIXO) C ` AMI 
-50 -a t PIXE Bh 
> n 一 oo ,有 
f" + cHU -a, + BX)PIX(n) Eg] 
Ze I PIRE R +Y d, PIKO) Eg \ MI 
由 定理 条 件 , 有 


SPX) ER< = (3.4.12) 
DAPI JER NMI < = (3.4.13) 


M3. 4. 12) MG. 4.13), 有 
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SaPlX(n) & M| < œ 
a l 


MTE (as), ABER ple < F' | SPES] 

> 0, 则 存在 正 数 es Ma, fF 

Ple < f° —2e} > 2a 
由 于 OX Cr) ) 几乎 处 处 收 合 到 &, 基 于 叶 果 洛 夫 定 理 ,存在 可 测 
RAPA) 之 1 -a,F(X(n)) 在 A 上 是 一 致 收 第 的 ,这 样 ,对 于 
任意 = > 0, 存 在 No( 不 依赖 于 A), E n SN, 时 总 有 

E-e CH Xin < ë +ë 
令 

B=ANIé<f -2el 
MJ34 p(B)Z a Ba > N, 时 ,有 

f(K(n)) < Ete < f* — e=X(n) EM 
AT“ n> Nj 时 ,PIX(n) 6 Mi Sa, 


SAPIR) € M > a Sa, 一 "oo 
与 式 (3.4. 13) 矛盾 ， 则 有 
Pllimf(X(n)) = f" i= 
再 由 定理 3.1.6, 即 有 
Pllim[X(n) C M]l = 1 
推论 3.4.1 在 定理 3.4.2 中 , 若 采 用 单 点 杂交 或 均匀 杂交 ， 
杂交 概率 为 q, , 若 


> Prt) < eo, Y = = 
WIX Cn ji 几乎 处 处 强 收 伍 到 全 局 最 优 解 集 。 


证 明 “车 变异 为 
p. iX, Y| = | _ pyre 


187 


第 3 章 SRR ae W EE 


旭 
= (1- p, )' 
b, = (L — p.) p, = Ol(p,) 
d, = P, 
对 于 单 点 人 杂交 运算 与 均匀 杂交 运算 均 有 
a, = 1! - ç, 


则 D-a, HOY] = Dla, + OG] < œ 
>a, = Sp, 

推论 3.4.2 ”对 于 私有 变异 和 选择 的 遗传 算法 ， 45 < 
oo 时 定理 3,4.1 成 立 ， EEA Ya, = co, MEH 3.4.2 成 立 。 


证 朋 直接 利用 定理 即 证 。 
HFA 3.2.3 采 用 父子 两 代 竞 争 选 择 方式 ,我 们 同样 可 以 用 


= oo 


BRT CHG LEK JU A Ab tit. 
定理 3.4.3 BIX) 是 例 3.2.3 中 的 父 代 参 与 竞争 无 杂 
ERER MGX D, F) ETE AYA FE, BD 
EFX Cn + 1))/F,) 2 F(X(n)) (n1) 
证 明 ”由 于 ZE CX OY), AŽ) > F(X) 
E(f(X(n +1))/X ln) = X) 
PUf(Z)PIX(n + 1) = Z/X(n) = X! 


= DIZ) IPH IX, YIP (X @ ¥),Z} 


Ze (XY) 


Tuzo 5 St AY)] 


ye +Y) 


= = PP; IX, Y! > F(Z) 


Ë= 
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> F(X) 
则 证 。 
定理 3.4.4 ”在 定理 3.4.3 条件 于 , 记 
ra = minP, 1X, Y} (a = 1) 
X.Y 


% 2171 = 时 ,有 
(i) lim F(X (2) = f° las.) 
(2) Pllim[X(z) C M)l = 1 
证 明 — 
F, = XO NM Z @] = IXan = f" ] 
对 于 下 著 FOX(n)), ARES 
JOPIE} >|. FCn+ Dap > [ FRX) dP 
= f* PLF | 
于 是 
| (XG + yep = f° PIF;| 
FOS RM) Sf EF EAX (n +1)) = f" (as. oF RF, 
CF, thE F... CF, A,X MAS, FRE X, 使 
f(X,) < f" Y HY OM =Ø LWN Y WY, 
FUR DYD > F(X) + He 
于 是 ,由 条 件 期 望 性 质 即 得 
E(f(X(n +1))) 一 E(F(X(n))) _ 
= E(E(f(X(xn + :1))/X(n))) — E(f(X(n))) 
= EPIX(n) = X! 
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PFC 时 Y>) - FX)) 
Y 
> D PIX(n) = XIPLIX,Y,! 
ANnMzg |, 
- (f KX Q Y>) - f(X)) 
> ÊPIF, |r] 
对 上 面 不 等 式 求 和 ,有 
f` REXin + 1))) - E(fF(X(1))) 
SRP lr 
令 -co, 即 得 
SI PIF, ir] < °° 
n=l 


m 


HT Sori = 0, TEDA PIP, | — 0, 即 
n=1 
lm/(X(n)) = f° (a.s.) 
则 证 (1)。 
(2) 由 定理 3.1.6 可 证 。 
我 们 指出 , 当 变异 转移 概率 为 


P|X,Y| = H Paix, Y,] 
时 ry = 必 , 于 是 定理 3.4.2 的 条 件 与 定理 3.2 .5 的 条 件 一 致 事 
实 上 ,定理 3.2. Ste Str: = = co 条 件 下 向 样 成 立 。 


对 于 标准 遗传 算法 ， 变异 概率 p, =p >00, r = pip< 
172), TEH 3.4.4 条 件 满足 , 短 此 ,对 于 变异 不 变 遗 传 算法 采 
用 定理 3.4.4 的 算法 几乎 处 处 强 收 和 化 到 全 局 最 优 解 集 。 
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3-5 RIER ARANE KA E 


遗传 算法 的 收 敏 定理 是 对 一 串 遗 传 机 制 序列 G, 进行 讨论 ， 
LAT XC + 1) = G,(XCn))o 遗 传 算法 的 渐 近 收 黎 定理 是 对 遗传 
机 制 序列 G: 进行 讨论 ,这 时 
X*(n +1) = GECX*(n)) 
定义 3.5.1 OLE LTE AY TIE AP ES > 3 RI 
解 集 , 若 
im limP|(X*(n)) OM #@ =1 


lim haoo 


称 遗传 算法 的 渐 近 序列 概率 强 收 化 到 全 局 最 优 解 集 , 若 
称 遗 传 算法 的 渐 近 序列 是 几乎 处 处 弱 收 伍 到 全 局 最 优 解 集 ,车 
Pllim lim[(X'(n)) N M AB) = 1 
称 遗 传 算 法 的 渐 近 序列 是 几乎 处 处 强 收敛 到 全 局 最 优 解 集 , 若 
Pilim lim[ (X (a) N M = G1=1 
定理 3.5.1 对 于 遗传 算法 的 渐 近 序列 | 这 (Cn) , 若 满足 
PiX (a+ DNM= S/n) = X} 
Je. xn M= @ 
= + 
Bes x ni M = iia 


a, 


Tig OCA 2) EXE Con) | EE A SS k 


iB ERE OE LX* (na) 满足 
PIX*(n +1) NM Z @/X* (n) = X! 
fe X n M: = @ 
4”, 
Bñ, X n M = @ 


Ap <1(&2>1), 
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HAR < Ke Sl), Sa X* (rr) | 浙 近 概率 强 收 
仇 到 最 优 解 集 。 
证 明 设 
Pin) = PiXhM(n) MAS] 
Sik Pila +1) Sa, + BñP,( n) 
从 而 
Pon + 1) < D Bias + BP) < = +Ë 
于 是 
lim lim P, (a + 1) < 0 
证 得 


lim lim P1(X*(n)) NAMAZI = 1 

即 1X* Con) | BONE SS k Se B RL OE BYE XE (Cn) | 新 近 
PE TRU RBS HR 

FT ees EE PIL KR FE EH kA. 

HR AMER IES AME: 

(1) 通过 变异 m EX (a) 变 为 Y' (n) ESRF m, 转移 要 
RH 

P,iX,¥} = Plm, (X) = Y! = ad (1 一 a 8? 
其 中 m = ka 是 正 实数 ,变异 m, 的 种 群 转移 概率 为 


P,,1X,YI l= TIP Ix, Y,i 


j=] 


BRA 
N 

limP,, X,Y} Ife (X;.Y)) (3.5.1) 
=] 
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Oi, X=Y 
AXO = | xay 
BWIET IE, m, ETERA, CKMT a , 当 a, — On 
扰动 逐渐 消失 。 


(2) 通过 选择 S, RX (Cn) CD Y) BH X: (n + 1), 其 中 
X*(n) BY (n) ARA X (a) 55 Yt (n) 联合 而 成 的 2 个 个 体 
组 成 的 向 量 。 选 择 算 子 S, 的 转移 概率 为 

Ps IX @ Y,Z,l = PIS, (X @ Y), = Z| 

_ RB Y) (Z) IZD) 
DULG) + PCC) 


sth (XD YNZ) 表示 Z, # (X DY) PMA RAS, : 
R: — R' 是 严格 增 函数 。 可 取 

JFZ) = expl- F(Z Ong} 
0< A < 1,38 8, =k*, b 为 正 实数 ,于 是 通过 选择 算 子 种群 转 
移 概率 为 

Ps IX ÐY.Ži = PIS (X @ Y) = Z| 


(Z € X@Y) 


= [| Ps IX BY.Z,| 
jet 
` Bik 
limPs 1X @ Y, Ži = I ent (3.5.2) 
其 中 BCX 四 Y) BRECK D Y) 中 取 最 大 值 的 个 体 ， 
(X @ Y)XZ,) 表示 Z, EX DY) 中 的 个 数 。 
FP i RH ES k-= co 时 m, AS, 的 转移 概率 的 性 质 。 
当 关 充分 大 时 ,有 
Pr, IX Y] 一 (1 _ Bot yal pad 4.9) 
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=~ expl- ad (X, ¥)Ink| (3.5.3) 
其 中 


d(X,¥) = S14(X%,,Y,) 


-Ù (KD Y)XZ explof(Z, ink} 
st Y expl f(X, )Ing! + expl bf (Y; )Ink}] 
` Tí BY explaf(Z,) - F(X @ ¥)ink} 


a TOn 


= C(X Dewl XZ) - F(X B YI ng! 
(3.5.4) 
其 中 
we U3 NG) 
联合 式 (3.5.3) n 即 得 k — oo 时 有 
PIX’ (n +1) = ZZX*(n) = X} 
= YP. IX YIP IX @ Y),Z! 
Y 
a Ð C(X,Y;Z)exp(- V(X, Y;Z)Ink) 
Ye D(X.2) 
(3.5.5) 
其 中 
D(X,Z) = |Y;:Z C X; Y| 
V(K,Y;Z) = dy lad(X;,¥,) + bX @ Y) - /(2,))) 


由 于 在 式 (3.5.5) H, M4 k — oo Bt, VOX. YD 越 小 时 在 式 
(3.5.5) 中 右边 的 项 起 作用 越 大 。 因 此 令 
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V(X, Z) = min, V(X, Y; Z) 
Ye p(X,Z) 


DOX,Z) = IY;:Y € D(X,Z),V(X,Y;Z) = V(X ,Z)! 


(3.5.6) 
C(X,Z)= Y C(X.Y:Z) (3.5.7) 
Ye pt(X.2) 
FEA 
- PiX {n +1) = Z/ZX*'(n) = X] 
= COX, 2) VL 4 (KUY) (3.5.8) 


由 式 (3.5.8) 可 见 
P{X*(n +1) = Z/X*(n) = XI = 0 
S v(X,Z) = co=SC(X,Z) = 0 
& 
PIX,Zsk] = CCX, Zy iD 
由 于 FS*| <o ,对 于 任意 s > 0, FEK, £ = K MA 
(1-e)P|X,Z;ik1 < P|Xt(n +1) = Z/X: (n) = XI 
= (1+e)PIX,Z;b| (3.5.9) 
定理 3.5.2 MERE LERKAR, AEN 
BRN, a,l, b, O MERIEN > al 705, WJ] XY (nr) | 新 近 概 率 收敛 
到 全 局 最 优 解 , 即 
lim lim P| X (n) 门 邮 关节 =1 
HA iu 
A = min| V(X, Y,Z);X M z Z, 
Zn M= ,YE D(X,2)| 
Z 0 M= Dez) < GSN) — /(Z)> 8, X. 
XN M= @mn.fJ(X O Y) =f , TE F(X @ Y) - f(Z)> 
SU < N) FEM AD ONS. Am X N M = SHE 
PiX? (a +1)f1M = BX’ (n) = X} 
<1 SY INS O = a, 
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4X (| M = @ WL. 2 Z € M.2, = (Z, ,Z) UR Y, = 
(X, Xu. Z), Z, 1) M Z @,Z C XD Y, FR 
PIX (a+ DNOM = S/X*(n) = XI 
<1- PiX(n +1) M = B/X (an) = X| 
<1- CCX, ¥o,Z, )expi— V(X, ¥,,Z,)ing | 
<1 —expi- af(ing)i = 1 — E =h 
BRB < 1k 1), R 
fin | 二 = lim SN E N 一 
一 [SY |N" lima OP“? 一 0 
由 定理 3.5.1 RRE, 
定理 3.5.3 ”对 于 本 节 所 有 述 广义 模拟 退火 遗传 算法 , 若 它 的 
参数 a ,1,5,8 RRR all — 1) < be IIX CG) AARRE 
敏 到 最 优 解 集 , 即 
lim limP!{X*(n) C MI = 1 
证 阴 i 
B= min! VOX,Y¥,Z);% CM,Z NM D, 
Y € p(X,Z)! 
5 X C M,Z NM Z @,Y € D(X,2) 时 必 有 V(X,Y,Z)> 
a + bd, Ai B Za + bó, FE X NM = Z W 
PiX (n+ ONM Z GX: (n) = X| 
= | SN INNp Ge) = as 
与 定理 3.5.2 3818 RZOMEZ 5 Y TEX N M > É N 
# 


PIX (n + DNM 4 S/R (n) = X| 
<1 一 C(X, Yo ,0 Jexp — VOX,Y,,2Z,)Iné} 
<1-k4 =Ë 
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BRB < (£ > 1). H 
= |SY IN" lime “er = 0 


%1- Sa 
由 定理 3.5, 1, Wik. 

定理 3.5.3 的 条 件 过 于 苛刻 ,要 求 个 体 长 度 ! 是 足够 小 。 为 了 
给 出 更 加 宽松 的 条 件 , 我 们 采取 图 论 方法 。 由 式 (3.5.8) 可 见 
V(X,Z) 在 研究 收 盆 中 是 极端 重要 的 ,首先 给 出 几 个 引 理 。 

引 理 3.5.1 V(X,Z) 具有 以 下 性 质 : 

(1) VX € SY,7 & BY MW V(X.Z) > 0 

(2) ¥X,Z € SY, V(X,Z) = 0=Z C B(X) 

(3) VX € BY, VZE SN.X #Z>V(K,Z) > 0 
其 中 BY 为 齐 次 种 群 , 即 

BY = |X € SAX) = AXN 
证 明 (1) VY € s", ZOX@Y.Z & Bo 
HX Y) > WIZ 
于 是 V(X,Y;2) > 0, 从 而 VX, .Z) > 0。 

(2) V(X,Z) = 0 时 , fE Y € S* 2 C X OY @ 
V(X,Y:Z) =0, +E X = Y,/(Z) = FR @ Y) = FR) 
(< N), Z C BCX). 

(3) 只 须 证 明 ， vYe S*MZCX OY, V(X, Y; ;Z 


4 


事实 上 SX AY RA V(X.Y;Z) > 0.08 ¥ = X 
PG) € BY 是 以 i 为 个 体 的 齐 次 种 群 ,X = Y a ZC Xp Y 
(i), MJ2 = X, ik 5 Z Z F868. 故 只 能 有 Y Z X, 从 
V(X ,Y:Z) > 0, 

EX 3.5.2 HLE-TSARE, ROSER, kmn 3⁄ 
AR WOL,—P aR m = nlm € LX Won € L,n > m) A 
成 的 图 称 为 W 图 , 若 它 满足 : 
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(1) Vm € LN W 是 一 个 且 仅 仅 是 一 个 箭头 的 始点 ; 

(2) 在 图 中 不 存在 闭 循 环 ,或 等 价 地 

(2) Vm € L N W HE- “WRT, EIDE € W. 

用 GOW) 表示 w 图 的 全 体 ， VX € SY, G(X) 表示 SY EX 
图 的 爹 体 , 对 图 gE G(X),4 


Ite) = J PlY,z 


(P26 g 


> H= SC HI cc¥.2) 
g€ G(N) gE) (Y-—2)€ z 
' exp] — > V(X, Zink | (3.5.10) 
(Y-=Z)€ gz 
由 式 (3.5,9) BB, 5 k > K, 时 有 
a-oa ir < (X) 


Qk 


Y 
Y 


<U + ee) (3.5.11) 
Hp 
(X) = limP{X* (a +1) = X/X*(n) = Y} 
4k RAM (3.5.10) 中 右边 求 和 中 起 主导 作用 的 量 是 
W(X)= min S V(Y,2Z) (3.5.12) 


REG (A) Zens 


用 G(X) 表示 能 达到 上 述 极 小 值 的 六 图 的 全 体 , 则 有 
Q = >) ( TI C(Y,Z)k- wo), ofk” WOO) 


K€G(X) (F--2)€ g 


(3.5.13) 


» 


D(x) = ` JI ce¥,2) (3.5.14) 
REGO -Eg 


W = min! W(Y);Y € 5^] 


198 ist 16 W rk Bb B S E nil 


= IX; W(X) = wi 
于 是 Ve > 0, 存 在 K, , 4 £ = K, 时 有 
D(X) w-w(X) Qi 
1 = Ë << 
(Le) © DY) To 
Ye w` y 
D(X) w-w(X) 
=< (1 + #) <5 Ë 
> DD 
Ye w 
TE, # Z max( K, ,K;) 时 有 
(1 — e yet D(X) w-w(X) 


(3.5.15) 


— pr < (X) 
< (1+ eine cee 
从 而 得 到 ew I 
f Ew 
lism st (X) -| POD. few 


yew’ 
引 理 3.5.2 HX & BY WV XC BCX), V(X,(X)) = 0, 
证 明 ”因为 


VŠD) = min [X (ad(X,,Y,) 


YE DEXA} j=l 
+ BCF(X @ Y) -XI 
那么 2 H X C B(X) C X u, yYes`#xe XG Y, 特别 取 
Y = X BH8 V(X,(X)) = 0, 
引 理 3.5.3 ”关于 图 有 以 下 结论 : 
(1) E G(X) 中 ,存在 图 g ,对 于 S" N JY 中 的 每 个 种 群居 


X EE z PORES Y + Z WE V(X,Z) = 0 H Z€ Br. 
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(2) WF X € PK W(X) RR z BS 上 的 图 。 
(3) £ X & Br, 则 有 
W(X) = min(W(¥) + V(Y ,X)) 
由 引 理 3.5.1 和 引 理 3.5.3{(3) ,可知 多" CA MRE, Hl 
3.5.3 81,4 X & BY it 
W(X) Z= minW( Y ) + minV(Y,X) 
Y€ A YEA 
叉 由 引 理 3.5.1 知 ,YYE XE AV, D) > 0, 
W(X) > minW( Y) > miaW( Y) 
YEA Ye s 
从 而 有 总 & Wow C gx, 
以 下 视 W A S 的 子 集 ,并 用 VOX. Y), W(X) 分 别 表 示 
VAX), CYD 和 W((X)). 
引 理 3.5.4 a.b 是 本 节 所 述 广义 模拟 退火 算法 中 的 参数 ， 
YX,Y € S, 有 
V(X.Y) = ad(X, Y) + ENCFCOX) - f( Y))' 
证 明 4X = Y 时 等 式 显然 成 立 , 若 多 关 Y 了 , 取 
Z = (NX,X,, X,Y) 


V((X),(Y),Z) = Slod(%, ,2,) 


+ b( F(X BZ) - flY))] 
达到 极 小 值 V(X, Y), HY CX) < f(Y) 时 ,V(X,Y) = 
ad(X,Y); 当 f(X) > ACY) PKR V(X, Y) = ad(X,Y) + 
ANCEX- fCY)) iE. 

定理 3.5.4 对 于 本 节 所 述 广义 模拟 退火 遗传 算法 , 当 它 的 参 
数 NN,a,l,5,8 满 是 NN >a- 176 BF. VX ES ZEME 
lim lim PIX" (n + 1) = (Z)/X(0) = X| 
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= mz ((Z)) = yT 
其 中 
2 = mini] f(X) — f( Y)|;f£(X) 2 /(Y),X,Y € S| 
证 明 根据 引 理 3.5.3(2), VX € S, 按 式 (3.5.12) 计算 
W((X)) 时 只 须 考虑 让 ECX) 图 , 即 $5 上 的 处 图。 下 面 分 三 步 
证 明 : 
(t) HRW’ CM, 
只 须 证 明 V X EMA 
W((X)) < min(W(( Y)) 
ER S EFEñJX Be H X AMARC g PREREX, — 
X, =e X > YB Ps OLX, € M(i= s). Y & MRY 
可 以 分 两 步 将 X 图 5 变 成 Xe 图 g. 
(a) HHA g PX, — Y Hab X — X, (8 X Él £ , H h 
引 理 3.5.4 得 到 
V(g)— V(g) = ad(X,,Y) + bN(f(X,) — f(Y)) 
— aq (X , Xo} 
>-— a(1 — 1) + bN8 > 0 


(b) 将 Xi — X, BUR X, — X, I (b € s) OX, ËI zg, bB + 
/(X,) = = f(X,) 
HB VX,Y € Sd(X,Y) = d(¥Y.X), & V(Xk X) = 
VOX, Xk =< s), Ki 


Vig) > Vz) = V(g) (3.5.17) 
XA VX ES, 根 据 引 理 3.5.3(2), 计 算 W((X)) ARAH S 上 
AX Pele SRR) ie sh (3.5.17) 8 W((X)) > WAXD), AM 
minW((X)) > W((X,)) 
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TE W CM. 
(2) 证 明 V X, Y € M,W((X)) > W((Y)) BW" = M. 
ER X Be € GUX)) B YAX, z 中 存在 唯一 路 径 
Y = X, = X, 0 — X > X,,, = X (s Z> 0) 
先 证 明 V £ < s, X, € MATR, RMX, & M.R 
(Xj, XI OM 
在 图 g 中 删除 XX 一 X, , 补 加 X > X, ,得 另 一 个 XX Be 且 有 
Víg) 一 Vig ) = VOX +X} - VOX X) 
= ad(X,_,.X,) + ONC FOX, - I) — FOXY) 
— ad( X,., , X) 
>-ali-1)+4Né > Ü 
于 是 有 V(B) < V(g) = W((X)), 5 & € G((X)) FOR 
V £ < s,X, € M. 

HEKKE Y = X, X > X — X.,, = XKX = 
XX XL Xy = YY, 得 Y 图 g 且 有 V(g) = V), 
Am W(X) > WY). H T X,Y € M 是 任意 的 , M 
W((X)) = W((Y)), 同时 表明 上 面 的 了 图 &E G((Y)) H 
W C M, TË: W" = M. 

(3) 证 明 VY X,Y € M, #6((X))] =16((Y)>)| HB 
D((X)) = D(CY)), 

由 (2) 中 证 明知 V X Bg € G((X)) fee 0 Y El £ C 
C(CY)) ,而 且 不 难看 出 不 同 的 X 图 g € G((X)) 对 应 着 不 同 的 
Y 图 gE CC((Y)) ,反之 亦 然 。 这 样 在 G((X)) 与 G((Y)) 之 间 可 
通过 (2) 证 明 中 的 方法 建立 一 一 对 应 gmg ,使 V{g) = Vig) 
时 也 证 明了 1GCCXD)| =1GCCY)) I. 

为 了 证 明 D((X)) = D((Y)),#E V(X, Y:Z) 的 表达 式 中 ， 
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BOX = (X. ),Z = (x,),X,,X, 5, 易 知 只 有 取 Y 了 = (X,) Bt 
V(X,¥;Z) 达 最 小 值 , 即 

DCX, (X = (XI) 
RAW 

CX), (X)? = C((X,),(X, y (X. )) 

= dy (Xe) = dy, (X) = C((X;,),(X,)) 


再 利用 GOXY 5 G(CY)) 在 (2) 中 证 明 的 对 应 关系 gg 和 式 
(3.5.14), 即 得 


D((X)) = 2 Jl e€0X%,),0%2)) 


MAM, 1X, NE g 


= 5 TE — eX) (X: = D((Y)) 
FEGUXÐUK MX, NEw 


于 是 


fine’ OO) = yy = TMl 


推论 3.5.1 ”对 于 本 节 所 述 广 义 模 所 退火 遗传 算法 ,车 它 的 
BRN ,a,1,6,8 满足 N > aU =D 时 , 则 v X € S" 有 
lim limP{X*(n) C MI = 1 
BS ALGER K WL AR SP E tA. 
证 了 明 ”利用 定理 3.5.4 直接 可 证 。 


3-6 ”遗传 算法 的 停 时 计算 问题 
对 于 遗传 算法 我 们 期 望 知道 首次 到 达 最 优 解 集 的 时 间 , 即 售 


时 问题 -由 于 遗传 序列 是 随机 的 ,首次 到 达 的 时 间 也 基 随 机 的 。 这 
里 我 们 关心 的 是 首次 到 达 时 间 的 期 望 值 。 
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定义 3.6.1 IX OO) 是 遗传 算法 序列 , 称 
T= minj n; Xin) AMD! 
Arig fe RE 9 BAR [8] , 
用 B(X in) 表示 Xn ) PERRA E 应 值 的 个 体 ， 
WROD) BRO) PTR, 则 
= = min|n; fbl X) = f"! 
其 中 
f° = maxi f(X) XES! 
如 果 用 ET) RRB TO 


E( T) 


PIT > Tol < ay 
Ü 


# ECT) T, BÍ 
To 1 


PIT > cT, 1 < — = 


SATa c 
独立 地 使 用 遗传 算法 k 次 , 则 至 少 有 一 次 在 cT, 步 之 前 找到 最 做 
解 的 概率 不 小 于 1 一 十 。 例 如 c = 2, = 20, 则 至 少 有 一 次 在 2 全 ， 
步 之 前 找到 最 优 解 的 概率 不 小 于 1 - 107°, 


为 了 估计 首 达 时 间 期 望 值 ,我 们 给 出 以 下 的 方法 ,将 S* 分 解 

Ain 个 互 不 相交 的 种 群集 合 S.C; < n) ,使 

S*=Us, SNS =g@(G= j) 
HWPFESREX€CS.YCS,.,SM:I< B .f(0(X)) < FO6(Y)), 
如 果 遗 传 算法 是 杰出 者 选择 , 当 ;i < j 时 ,S, 中 的 种 群 不 可 能 转 到 
S, 中 的 种 群 。 当 把 状态 空间 分 解 为 Si,S:，……,S, 后 , 并 不 能 用 
ES) ,…,S,1 作为 状态 空间 构成 新 的 马尔 可 夫 链 。 为 此 , 记 

py = min|P(X,Y):X € S,Y€ SI G <j) 
P(X,Y) 为 齐 次 马尔 可 夫 链 {多 (n)| 的 转移 概率 。 同 时 , 令 
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Pa = 上 一 2, Ap 
MAC e, ) 作为 转移 矩阵 构成 群 马尔 可 夫 链 。 ARS 

a = ot Èp 

= Pit 

Lng (2a k <n — i) 

q, = Ü G < i) 
则 得 到 修正 的 群 马尔 可 去 链 的 齐 次 转移 矩阵 。 令 T, 表示 从 S; 到 
S, 的 首 达 时 间 , 则 ` 


aol 


E(T) < ŅEMT, aa) 


而 
P IT; a = ri = qia Cl 一 Gain! 
于 是 
E(Ty in) = Dyas gad) s r 
= fiir [ > (1 ~ qr) ] 
= 1 1 
= g alga) p Qia 
从 而 
mm 一】 1 
EID S <> iit 
例 3.6.1 计算 
i 
F(X) = 


i=l 
的 最 大 值 ,其 中 X; € [0,1](1 < i = fd. 
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SR MKC X = 1(i Sd) AR SX) 的 值 只 与 个 
体 X 中 有 多 少 1 而 确定 。 于 是 我 们 可 以 令 
= |X; (X) = il (0 所 所 7) 
TES, PAG 个 个 体 。 于 是 我 们 将 1S | 中 的 2 个 个 体 划 分 为 | + 1 
PFE SSe ,So 
用 A BRS, 中 个 体 有 个 1 转 为 0, 页 i 一 上 个 1 被 保留 的 
WIF, Ba RRS, 中 个 体 的 1 一 i 个 0 中 有 下 + -工人 个 0 变 为 1， 
而 一 了 一 二 个 0 保持 不 变 的 事件 ,于 是 
P(A,) = Gp - py 
P(B,) = CES pa pt Osi <j <2) 
从 而 ,i 之 了 时 有 


t 
= dy PCAs) * PBa) 


1 
= DPA- p GA = py 
1 
= CO ane _ pyi 
! 2s 
= wy: _ i-tj-r} bk tai 
"a pyr Seay (phe | 


bi =1- Dp, 


于 是 
= — i-i : k +l m 
Guin = PU p) >e (725) 
2 ph -pY - i) 
EIT) =< > 


pll p {= 
-ya p% 
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ECT) (gt + Dll -4)" 


= (lg! + l)exp(1) 
例 3.6.2 计算 

f(X) = DE 
的 极 大 值 ,其 中 x, € [0,1].G =< ¿= I), 

S, = |X € S;f(X) = OSES?) 
HIS) = 2) TARD +I ETES, 31 = 4 时 ,有 

Sa = 10000), (0001), (0010), (0011), 

(0100), (0101), (0110), (O111)} 

S, = 11000), (1001) ,€1010), (1011)} 

S, = $(1100), (1101) | 

S, = {(1110)} 

Sı = {C1111)) 
于 是 Pint = p(1- p)’ 


f-1 f-1 
E(T) = SECT. a1) = 5 a 
£=0 i= 0 Pin 
a4 l ; 
7 sp (ms) 
= HLA- py" - 1] 


B p= cZ(0 < c < 1), MJ 
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E(T) = Ll -4 )[(! -二 il<e _ 
在 以 上 的 例子 中 , 首 达 时 间 的 期 望 值 被 eR PLE ,但 这 
并 不 总 是 成 立 的 。 
例 3.6.3 给 出 目标 未 数 
fon =f" VXI, =: 
L- | XH: IX, <! 
仍然 令 S =|X€S: Xl, = il (0#=# i= 1) 
于 是 ,对 于 i 之 -1 有 
pa = pd _ py 


Pi Tl- py 
Mi < /时 
í 1 I i 1 i t; 
E T = = = = — = 
(Ta) Pa pad - py | ) l 


2" EGET) > EG = (4) Se(4) 
(H) -v 
于 是 首 达 时 间 的 期 望 值 被 指数 下 界 所 控制 。 
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